Observatoire du Numérique
TechTrends 8  /  8

Limites, risques et responsabilité

Analysez les biais, les hallucinations et les enjeux de fiabilité, de confidentialité, de sécurité, de propriété intellectuelle et de responsabilité.


Une intelligence artificielle peut être rapide et performante sans être toujours exacte, neutre ou sûre. Ses résultats dépendent de ses données, de son entraînement, de son contexte d'utilisation et des contrôles mis en place.

Les risques ne viennent donc pas uniquement du modèle. Ils concernent aussi la manière dont il est conçu, déployé et utilisé.

Des résultats parfois trompeurs

Biais

Un modèle peut reproduire ou renforcer les déséquilibres présents dans ses données. Il risque alors de produire des résultats moins fiables ou discriminatoires pour certaines personnes ou situations.

Hallucinations

Une Generative AI peut inventer une information, une source ou une explication tout en la présentant de manière convaincante. Une réponse bien formulée n'est donc pas nécessairement vraie.

Manque de fiabilité

Un modèle peut fonctionner correctement dans un contexte et échouer face à une situation inhabituelle. Ses performances doivent être testées dans les conditions réelles d'utilisation.

Protéger les données et les systèmes

Confidentialité

Les informations transmises à un système peuvent contenir des données personnelles, confidentielles ou stratégiques. Leur collecte, leur conservation et leur utilisation doivent être maîtrisées.

Sécurité

Un modèle peut être manipulé par des données malveillantes, des instructions détournées ou des attaques visant à obtenir des informations protégées.

Propriété intellectuelle

Les données d'entraînement et les contenus générés peuvent inclure ou reproduire des éléments protégés. Les droits applicables dépendent notamment des contenus, des usages et des juridictions concernées.

La responsabilité reste humaine

Une intelligence artificielle ne peut pas assumer la responsabilité de ses décisions. Les personnes et les organisations qui la conçoivent, la fournissent ou l'utilisent doivent définir qui contrôle ses résultats et qui intervient en cas d'erreur.

Plus les conséquences sont importantes, plus les exigences doivent être élevées. Une décision concernant la santé, l'emploi, le crédit ou la sécurité ne devrait pas reposer uniquement sur une sortie automatisée.

Une réponse générée ne doit pas être considérée comme correcte par défaut. Elle doit être vérifiée selon sa source, son contexte et les conséquences possibles d'une erreur.

Réduire les risques

Une utilisation responsable repose sur quelques principes simples. Il faut limiter les données transmises, tester le système, vérifier les résultats importants, informer les personnes concernées et maintenir une supervision humaine.

Il faut également prévoir la gestion des erreurs, documenter les responsabilités et réévaluer régulièrement le système. La fiabilité d'une IA n'est pas acquise une fois pour toutes.


Sources
  • NIST, AI Risk Management Framework et profil consacré à la Generative AI : www.nist.gov
  • CNIL, recommandations sur les données personnelles et la sécurité des systèmes d'IA : www.cnil.fr
  • OCDE, principes relatifs à la transparence, aux risques et à la responsabilité : www.oecd.org
  • OMPI, guide sur la Generative AI et la propriété intellectuelle : www.wipo.int