Comparateur
- AUTO
Des chercheurs de l’Université technologique Nanyang (NTU) (Singapour) sont parvenus à développer Masterkey, un chatbot-IA conçu… pour jailbreaker d’autres chatbots, notamment ChatGPT et Google Bard ! Cette avancée indique que l’IA peut désormais compromettre les grands modèles de langage (LLM) et donc produire du contenu interdit par leurs garde-fous programmés. Les modèles d’IA peuvent en effet potentiellement générer du contenu malveillant (voire illégaux selon les législations en vigueur), et pour éviter cela, les développeurs ont mis en place des protections qui bloquent les résultats litigieux, mais la technique « Masterkey » de l’équipe du NTU démontre que ces mesures de sécurité peuvent désormais être contournées.
Les chercheurs ont procédé à une ingénierie inverse des LLM les plus populaires pour comprendre leurs mécanismes de défense contre les requêtes malveillantes, qui impliquent souvent l’analyse de mots-clés et d’expressions spécifiques. Ils ont alors découvert que des méthodes extrêmement simples, comme ajouter un espace après chaque caractère, pouvaient tromper le scanner de mots clés intégré aux Chatbots. De plus, le fait de présenter des requêtes comme des scénarios hypothétiques ou d’utiliser des caractères spéciaux pour encadrer les réponses a conduit à la génération de contenus interdits par ChatGPT et Bard.
Masterkey réussit ici à convaincre ChatGPT d’expliquer comment pirater un site Web pornographique
Fort de ces informations, l’équipe NTU a alors formé son LLM pour identifier et exploiter les faiblesses des différentes défenses des IA, jailbreakant ainsi efficacement ChatGPT et Bard. Masterkey, peut aussi s’adapter de manière autonome et créer de nouvelles stratégies pour contourner les protections qui ont été mises à jour. Malgré les risques potentiels, l’intention de l’équipe NTU n’est pas de libérer dans la nature une IA nuisible, mais d’exposer les limites actuelles de sécurité des IA publiques. Preuve de ces bonnes intentions, les chercheurs ont informé OpenAI et Google de cette technique de jailbreak, ce qui permettra sans doute de renforcer les contrôles sur la production des contenus.
SOURCEExtremetech
Le Google Play Store s’améliore sur Android : les utilisateurs peuvent désormais télécharger et installer plusieurs...
Qui ne tente rien n’a rien. Malgré l’orgie de preuves indiquant que le géant américain tient une place monopolistique...
Le Financial Times (FT) vient de conclure un accord avec OpenAI pour licencier son contenu et co-développer des outils d’IA, marquant ainsi...
On ne parle pas (encore) de « destruction de preuves », mais l’affaire est grave. La Federal Trade Commission (FTC), qui a...
Xavier Niel, fondateur de Free, fait du teasing pour une prochaine annonce autour de l’intelligence artificielle. Il dit que cela interviendra...
29 Apr. 2024 • 15:25
29 Apr. 2024 • 13:05
29 Apr. 2024 • 11:45
29 Apr. 2024 • 9:45