Le vrai risque de l'IA n'est pas le virus, c'est la phrase cachée.
Une compétence est un texte, et une IA obéit aux textes. Voici ce qu'une consigne glissée au mauvais endroit peut déclencher, ce qu'il faut regarder avant d'installer un skill d'où qu'il vienne, et ce que je contrôle avant de publier.
Ce qu'un texte peut faire faire à votre IA
Une IA ne se pirate pas comme un ordinateur. Elle se convainc, avec des phrases.
Une compétence est un texte, pas un logiciel
Une IA sépare mal la consigne du document
Une consigne peut échapper à votre œil
Une compétence n'a que les accès que vous avez ouverts
Là où ça devient sérieux
Le code et le mode automatique.
Ces deux réglages font la différence entre un texte à corriger et un dégât à réparer.
Écrire n'est pas exécuter
Tant que votre assistant rédige un mail ou un compte rendu, le pire qui vous arrive est un texte à corriger. Le registre change quand il exécute quelque chose : lancer un script, modifier un fichier, appeler un service. Là, une erreur ne se relit pas, elle se répare.
Le code proposé par une compétence
Une compétence peut proposer un bout de code pour convertir un fichier ou trier un tableau. Le principe est sain, à condition que vous voyiez ce qui va tourner et que vous validiez. Une compétence qui exécute sans montrer, ou dont vous ne comprenez pas ce que fait le code, se refuse sans état d'âme.
Le mode automatique enchaîne sans demander
La plupart des assistants proposent un mode où l'IA enchaîne les actions sans confirmation à chaque étape. Le gain de temps est réel sur une tâche répétitive et sans enjeu. Sur des dossiers clients, ce mode retire justement le moment où vous auriez vu passer quelque chose d'anormal.
Proposer et envoyer sont deux choses
Un assistant qui rédige un courrier et vous le montre vous laisse le dernier mot. Un assistant autorisé à envoyer décide à votre place, à partir de ce qu'il a compris. Gardez la validation manuelle sur tout ce qui sort de chez vous : un envoi, une publication, une suppression.
Deux réglages à trouver une fois
Chaque assistant grand public a un réglage qui décide s'il demande votre accord avant d'agir, et un écran qui liste les comptes auxquels il accède. Les intitulés changent d'un outil à l'autre et d'une version à l'autre. Prenez cinq minutes pour trouver ces deux endroits dans le vôtre, avant d'en avoir besoin.
Avant d'installer un skill, d'où qu'il vienne
Ces six points valent pour une compétence prise ici comme pour n'importe quel fichier récupéré ailleurs. Aucun ne demande de compétence technique.
- Ouvrez le fichier avant de l'installer. Une compétence est du texte : elle se lit dans n'importe quel éditeur, et ce qu'elle annonce doit correspondre à ce qu'elle demande.
- Comparez les accès à la tâche. Une compétence qui rédige des comptes rendus n'a rien à faire dans votre messagerie ni dans votre comptabilité.
- Méfiez-vous de tout ce qui réclame plus que nécessaire, et de toute consigne qui parle d'envoyer, de publier ou de transmettre quelque part.
- Faites le premier essai sur un cas fictif ou un dossier clos, jamais sur l'affaire d'un client en cours.
- Gardez la validation manuelle sur les actions qui sortent de chez vous, même quand le reste tourne en automatique.
- Repérez à l'avance l'écran qui liste les accès actifs et le bouton qui les retire, dans votre assistant comme dans le compte Google ou Microsoft concerné.
Aucune de ces vérifications ne dépend de moi. Si vous ne retenez qu'une chose de cette page, gardez la dernière ligne : savoir couper un accès vaut mieux que n'en avoir jamais ouvert.
Ce que je contrôle avant de publier
Un fichier ramassé sur internet arrive chez vous sans que personne l'ait lu. Voici ce qu'une compétence passe ici avant d'être publiée.
Un seul fichier, aucun programme
Un contrôle automatique des consignes cachées
Un second niveau, relu à la main
L'envoi reste votre geste
Ce que je ne promets pas.
Aucun contrôle automatique n'attrape tout. Le mien reconnaît les formules d'injection connues et les commandes dangereuses, pas une consigne rédigée d'une façon que personne n'a encore vue. C'est pour ça que la liste plus haut existe : elle ne dépend pas de moi.
Je ne vois rien de ce qui se passe chez vous. Une compétence travaille dans votre assistant, avec les accès que vous lui avez donnés. Bonne nouvelle pour la confidentialité de vos dossiers, et cela veut dire que vos réglages comptent autant que mon travail.
Claude ne m'appartient pas. Si Anthropic en change le comportement, je ne peux que rejouer mes essais et corriger ce qui a bougé.
Votre poste reste le vôtre. Si la machine sur laquelle vous travaillez est déjà compromise, aucun fichier venant d'ici n'y changera quoi que ce soit.
Si vous voyez passer quelque chose d'anormal, dans une compétence prise ici ou ailleurs, écrivez-moi à contact@iaskills.fr. La compétence sort du catalogue le temps que je l'examine, et je vous dis ce que j'ai trouvé.
Des compétences relues, plutôt qu'un fichier ramassé sur un forum
Un seul fichier texte par compétence, un contrôle avant chaque publication, un point d'arrêt avant tout envoi.