Discrimination et toxicité
Risques liés à des systèmes d'IA qui discriminent, déforment la représentation des personnes ou exposent les utilisateurs à du contenu toxique.
Sous-domaines (3)
Risques classés au niveau du domaine (8)
Entrées du AI Risk Repository (MIT) rattachées à ce domaine sans sous-domaine précis. Contenu original en anglais.
8 entrées
17.01.00Discrimination, exclusion et toxicité
« Préjudices sociaux découlant du modèle linguistique produisant des discours discriminatoires ou exclusifs. »
18.01.00Préjudices liés à la représentation et à la toxicité
Systèmes d'IA sous-représentant, surreprésentant ou représentant de manière erronée certains groupes, ou générant du contenu toxique, offensant, abusif ou haineux.
19.05.00Risques éthiques liés à l'IA
Dans le contexte des risques éthiques liés à l'IA, deux risques sont d'une importance particulière. Premièrement, les systèmes d'IA peuvent manquer d'une base éthique légitime pour établir des règles qui influencent grandement la société et les relations humaines (Wirtz & Müller, 2019). De plus, la discrimination basée sur l'IA fait référence à un traitement injuste de certains groupes de population par les systèmes d'IA. Étant donné que les humains programment initialement les systèmes d'IA, servent de source potentielle de données et ont un impact sur les processus de données et les bases de données associées, les biais et les préjugés humains peuvent également faire partie des systèmes d'IA et être reproduits (Weyerer & Langer, 2019, 2020).
28.02.00Iniquité et biais
Ce type de problème de sécurité concerne principalement les biais sociaux sur divers sujets tels que la race, le genre, la religion, etc. Les LLM sont censés identifier et éviter les expressions et actions inéquitables et biaisées.
50.04.02Discrimination/Biais (Activités discriminatoires)
58.07.11Stéréotypage
Stéréotypage - Stéréotypage péjoratif ou autrement nuisible, ou homogénéisation d'individus, de groupes, de sociétés ou de cultures en raison d'une mauvaise représentation, d'une surreprésentation, d'une sous-représentation ou d'une non-représentation d'identités, de groupes ou de perspectives spécifiques.
62.34.00Impacts de l'IA (Biais)
66.06.00-
Systèmes d'IA sous-représentant, surreprésentant ou mal représentant certains groupes ou générant du contenu toxique, offensant, abusif ou haineux.