Des chercheurs de Georgia Tech ont identifié VillainNet, une porte dérobée qui cible les « super réseaux » d'IA utilisés par de nombreux systèmes de conduite autonome. Les super réseaux fonctionnent en échangeant de petits sous-réseaux selon la tâche : pluie, trafic, changements de voie, etc. David Oygenblik, doctorant et chercheur principal du projet, a expliqué cette conception comme un « couteau suisse » de l'IA.
La porte dérobée reste inactive sauf quand un sous-réseau très spécifique est sélectionné. Dans ce cas, VillainNet s'active et peut permettre à un attaquant de prendre le contrôle du véhicule et de forcer une collision. Les expériences montrent que l'attaque réussit presque toujours une fois activée. Les chercheurs ajoutent que la détection de ce type de porte dérobée demanderait beaucoup plus de puissance et de temps que les méthodes actuelles.
Le projet avertit que la menace peut être insérée à n'importe quelle étape du développement et couvrir des milliards de scénarios. Les auteurs demandent de nouvelles défenses pour ces systèmes d'IA adaptatifs.
Mots difficiles
- porte dérobée — programme caché qui permet l'accès secret
- super réseau — grand modèle d'IA qui combine plusieurs réseauxsuper réseaux
- sous-réseau — petit composant d'un réseau pour une tâchesous-réseaux
- inactif — qui ne se déclenche pas et reste cachéinactive
- attaquant — personne ou programme qui attaque un système
- détection — action de trouver ou repérer un problème
- défense — mesures pour protéger un système contre attaquesdéfenses
Astuce : survolez, mettez le focus ou touchez les mots en surbrillance dans l’article pour voir des définitions rapides pendant que vous lisez ou écoutez.
Questions de discussion
- Que pensez-vous du fait que la menace peut être insérée à n'importe quelle étape du développement ?
- Quelles défenses simples proposeriez-vous pour ces systèmes d'IA adaptatifs ?
- Seriez-vous prêt à utiliser une voiture autonome en connaissant ce risque ? Pourquoi ou pourquoi pas ?
Articles liés
Une IA apprend des valeurs culturelles en observant des humains
Des chercheurs ont montré qu'une IA, entraînée à partir du comportement humain, peut apprendre des différences de valeurs entre groupes culturels. L'étude utilise le jeu Overcooked et un second test sur le partage d'argent.
L’Ouganda doit réformer la science et l’innovation
Un rapport lancé le 21 juin dit que l’Ouganda doit réformer ses systèmes de science, technologie et innovation (STI) pour devenir un pays à revenu intermédiaire. Le texte souligne un écart entre les sexes et un manque de financement local.
Des fours modernes pour réduire les pertes de poisson au lac Malawi
Un projet lancé en 2024 aide les transformateurs de poisson au lac Malawi avec des fours de fumage modernes. Ces fours utilisent moins de bois, accélèrent le fumage et améliorent la qualité et la sécurité du poisson.
