Une phrase invisible sur une page web suffit à fausser la mémoire de votre assistant IA pendant des mois

Un assistant IA doté d’un accès au web lit chaque page dans son intégralité. Certains passages restent hors de portée du regard humain. Ces lignes finissent parfois dans sa mémoire longue, où elles patientent.

ChatGPT
Crédits : 123RF

Depuis quelques mois, la mémoire longue s’est imposée comme l’argument central des assistants IA. Tous les grands acteurs ont adopté le principe. Gemini a rattrapé ChatGPT et Claude en France au printemps, avec sa propre fonction de mémorisation. Fini les rappels sur ses préférences à chaque nouvelle conversation. En pratique, le programme retient aussi ce qu’il croise pendant ses recherches en ligne. Chaque page consultée devient une réserve de souvenirs potentiels.

Côté sécurité informatique, cette accumulation attire beaucoup l’attention. Des chercheurs américains avaient déjà glissé de faux souvenirs dans une IA par de simples requêtes cachées. Une équipe de spécialistes en cybersécurité vient de décrire un autre chemin, nettement plus discret. Publié début août, ce modèle de menace s’appelle empoisonnement persistant de la mémoire. Il vise les programmes dotés d’un accès au navigateur. Aucune manipulation directe n’entre en jeu.

Le faux souvenir de l’assistant IA ressort au moment où l’utilisateur cherche justement un conseil

Forcepoint part d’un assistant chargé de lire une page consacrée aux perturbations de trafic. Les chercheurs y déposent, tout en bas, un paragraphe dimensionné pour échapper au regard humain. Dans ces lignes, une société est présentée comme le service officiel de réservation d’urgence. L’extracteur du programme ne distingue pas le visible du masqué. Rien ne sépare alors cette phrase d’une donnée vérifiée, et elle rejoint la mémoire longue. Le scénario reste une démonstration, sans victime recensée à ce jour.

Un mois plus tard, le vol de l’utilisateur est annulé. Il demande conseil à son assistant, qui lui recommande aussitôt la société déposée dans ses souvenirs. Aucune alerte n’accompagne la réponse. ChatGPT, Gemini, Claude et Microsoft 365 Copilot figurent parmi les produits exposés selon Forcepoint. Dans la littérature, l’attaque de référence baptisée MINJA dépasse 95 % de réussite à l’injection, même si des travaux de janvier rappellent que ces chiffres viennent de conditions idéales. Pour limiter les dégâts, le réflexe le plus simple consiste à relire de temps en temps ce que le programme a retenu.


Réagissez à cet article !

Demandez nos derniers articles !

Cette batterie qui respire ferait passer les voitures électriques à 2 000 km d’autonomie

Depuis des années, les constructeurs cherchent la chimie qui fera sauter le verrou de l’autonomie. CATL, premier fabricant mondial de batteries, dit regarder vers le lithium-air, une piste capable d’utiliser…

L’iPhone 18 standard ferait mieux que l’iPhone 18 Pro sur un point crucial

La fiche technique de l’iPhone 18 de base se précise. Comparée à celle du l’iPhone 18 Pro, elle pourrait même créer la surprise sur un aspect précis en faisant mieux…

Android Auto ne prend plus en charge ces deux versions d’Android : êtes-vous concerné ?

Google vient d’actualiser la configuration minimale requise pour les connexions filaires à Android Auto : deux versions d’Android ne sont désormais plus prises en charge. Ainsi, si votre smartphone est bloqué…

Un nouveau PlayStation Portal arrive, bientôt capable de faire tourner des jeux en local ?

Sony a annoncé le lancement prochain d’une nouvelle version de son mal-aimé PlayStation Portal, avec quelques fonctionnalités inédites à la clé. Si le constructeur n’a pas précisé la teneur de…

Free Mobile va fusionner avec Free : qu’est-ce que ça change pour les abonnés ?

Free Mobile annonce sa prochaine fusion avec Free. Les deux entités n’en feront bientôt plus qu’une. L’opérateur prend soin de détailler ce que cela implique pour les abonnés. Bien que…

Vous pouvez enfin tester le meilleur émulateur PC sur Android grâce à cette mise à jour

DroidDeck vient de se doter d’une mise à jour majeure qui le rend utilisable sur un nombre beaucoup plus large d’appareils. Autrefois réservé aux machines dotées d’une puce Qualcomm dernier…

SteamOS va accueillir le launcher d’Epic Games, le Steam Deck n’aura plus besoin de bidouille

Depuis des années, les joueurs sur Steam Deck jonglent avec des outils communautaires pour lancer leurs jeux Epic Games. Le studio vient de clarifier ses intentions pour son nouveau launcher…

Devenez explorateur de la galaxie : la NASA recrute ses futurs astronautes pour la mission lunaire Artemis

Pourquoi vivre et travailler sur la Terre alors qu’on peut le faire sur la Lune ? C’est toute la question de l’appel à recrutement lancé par la NASA le 7…

Ocarina of Time : le dernier Zelda aurait bientôt droit à un DLC qui ramènerait un mode culte chez les fans

Si le remake d’Ocarina of Time est très largement plébiscité par la critique et les joueurs, certains regrettent l’absence d’un mode disponible sur les anciennes versions du jeu. Mais l’espoir…

Blade Runner 2099 : faut-il voir les films pour comprendre la série sur Prime Video ?

Alors que la sortie de la série Blade Runner 2099 approche, vous vous demandez sûrement si vous devriez d’abord voir les 2 films tirés de l’univers pour bien tout saisir….