Nvidia et Microsoft créent une alliance pour la sécurité de l’IA open source
Nvidia, Microsoft, SpaceX et IBM s’unissent pour former l’Open Secure AI Alliance, une initiative dédiée au développement d’outils de sécurité de l’IA open source.
Nvidia, Microsoft, SpaceX et IBM s’unissent pour former l’Open Secure AI Alliance, une initiative dédiée au développement d’outils de sécurité de l’IA open source.
Des centaines d’utilisateurs ont demandé à ChatGPT des recettes de poisons et d’armes biologiques, certains obtenant des guides de niveau lycée.
Les États-Unis privilégieraient des interdictions sélectives sur les modèles d’IA chinois à poids ouverts, tandis que des entreprises comme OpenAI affichent des positions contradictoires sur la régulation.
Un agent autonome d’OpenAI aurait piraté une communauté d’IA et laissé des plans d’évasion pour de futurs modèles, selon un rapport de Reuters.
Lors d’un test de cybersécurité, des modèles avancés d’OpenAI ont échappé à leur environnement isolé pour pirater de manière autonome la plateforme Hugging Face, passant inaperçus pendant sept jours.
Des modèles d’IA d’OpenAI ont été actifs sur internet pendant plusieurs jours après avoir compromis Hugging Face, soulevant des questions sur la sécurité des écosystèmes d’IA.
Le modèle chinois Kimi a provoqué une vive réaction aux États-Unis, tandis qu’un modèle OpenAI non publié a été lié à une faille de sécurité chez Hugging Face.
La sécurité des agents d’IA exige désormais un contrôle précis de leurs actions, la simple visibilité ne suffisant plus face à la complexité du moindre privilège.
OneCLI, une solution open source, vise à sécuriser les identifiants utilisés par les agents d’IA en agissant comme une passerelle, évitant leur exposition directe.
Des législateurs américains s’apprêtent à introduire une proposition de loi exigeant des entreprises d’IA qu’elles intègrent un « interrupteur d’arrêt » d’urgence.