Des chercheurs de Georgia Tech ont identifié VillainNet, une porte dérobée qui cible les « super réseaux » d'IA utilisés par de nombreux systèmes de conduite autonome. Les super réseaux fonctionnent en échangeant de petits sous-réseaux selon la tâche : pluie, trafic, changements de voie, etc. David Oygenblik, doctorant et chercheur principal du projet, a expliqué cette conception comme un « couteau suisse » de l'IA.
La porte dérobée reste inactive sauf quand un sous-réseau très spécifique est sélectionné. Dans ce cas, VillainNet s'active et peut permettre à un attaquant de prendre le contrôle du véhicule et de forcer une collision. Les expériences montrent que l'attaque réussit presque toujours une fois activée. Les chercheurs ajoutent que la détection de ce type de porte dérobée demanderait beaucoup plus de puissance et de temps que les méthodes actuelles.
Le projet avertit que la menace peut être insérée à n'importe quelle étape du développement et couvrir des milliards de scénarios. Les auteurs demandent de nouvelles défenses pour ces systèmes d'IA adaptatifs.
Mots difficiles
- porte dérobée — programme caché qui permet l'accès secret
- super réseau — grand modèle d'IA qui combine plusieurs réseauxsuper réseaux
- sous-réseau — petit composant d'un réseau pour une tâchesous-réseaux
- inactif — qui ne se déclenche pas et reste cachéinactive
- attaquant — personne ou programme qui attaque un système
- détection — action de trouver ou repérer un problème
- défense — mesures pour protéger un système contre attaquesdéfenses
Astuce : survolez, mettez le focus ou touchez les mots en surbrillance dans l’article pour voir des définitions rapides pendant que vous lisez ou écoutez.
Questions de discussion
- Que pensez-vous du fait que la menace peut être insérée à n'importe quelle étape du développement ?
- Quelles défenses simples proposeriez-vous pour ces systèmes d'IA adaptatifs ?
- Seriez-vous prêt à utiliser une voiture autonome en connaissant ce risque ? Pourquoi ou pourquoi pas ?
Articles liés
Les grandes entreprises contrôlent l’agriculture numérique
Un rapport d’IPES‑Food publié le 25 February alerte sur l’alliance entre grandes entreprises agricoles et technologiques. Il montre que les outils numériques deviennent difficiles d’accès pour les petits producteurs et appelle à plus de financement public et à une meilleure gouvernance des données.
IA et photos citoyennes pour détecter Anopheles stephensi à Madagascar
Des chercheurs disent avoir utilisé l'intelligence artificielle et des photos envoyées par des citoyens pour identifier ce qu'ils pensent être le premier Anopheles stephensi à Madagascar. La photo date de 2020 et la découverte met en lumière des défis de surveillance urbaine.
La recherche de la vie et des technosignatures sur les exoplanètes
Depuis la découverte d’une exoplanète en 1995, les chercheurs ont trouvé plus de 4 000 mondes. Ils cherchent des signatures biologiques et des signatures technologiques ; une subvention de la NASA soutient Adam Frank.