Commentaires : Pourquoi nos modèles d'IA pourraient rendre les robots sexistes et racistes

J’ai pas pour habitude de commenter mais :

« Un problème de taille qui pourrait avoir des comportements dangereux envers les femmes et les personnes non blanches. »

Le racisme est partout, envers tous. Blanc, métis, … homme, femme, bi… liste non exhaustive, mais vous m’avez compris.

Il est socialement « intégré » qu’une personne est raciste du moment où elle va à l’encontre même d’un dogme politisé de masse … Ce dogme on le connait tous … L’homme blanc cisgenre est … raciste !

C’est établit … C’est un fait. Il suffit de voir sur les réseaux sociaux …

Sauf que tu oublies un détail … C’est que TOUT LE MONDE est raciste par définition ! Pourquoi ? C’est simple … Le communautarisme !! Bah oui, les individus se regroupent par religion, ethnie, couleur de peau, langue, pays d’origine, etc … Ce qui fait même du fondement d’une communautés basée sur l’ethnie ou autre (Ce qui est le cas partout en réalité !), la plus grosse forme de racisme et de xénophobie qui existe !
Un blanc dans un communauté hispanique ? Hanhan … T’en trouvera pas … Les communautés noires issues des banlieues américaines par exemple sont très fermées et les blancs, asiatiques, et hispaniques y sont très mal vu … Idem pour les communautés asiatiques (chinoises, coréennes, japonaises … Elles ne se mélangent pas entre elles et si tu as le malheur de te tromper entre un japonais et un coréen, il y a de forte chance que tu sois bon pour une visite chez le dentiste). Si tu es noir et que ta copine d’origine chinoise te présente à ses parents, il va y avoir beaucoup d’étincelles voir même un incendie quand le paternel va sortir le lance flamme !

Chez les LGBT+, dit toi que les gay et les lesbiennes considèrent les bi comme des gens indécis sur leur sexualité, les hommes transgenres tirent à boulet rouge sur les gays et les lesbiennes parce que ces derniers ne savent pas dans quelle case les mettre (sont-il homosexuels ? Pansexuels ? Bisexuels ? etc …), les gay et les lesbiennes ne peuvent pas se blairer (faut les voir en dehors de la gay pride tout ce qu’ils arrivent à se balancer les uns sur les autres, ça en devient gênant des fois) … Et avec tout ça, il y a les queers qui sont rejetés par les trans, etc, etc etc …

Tu ne veux plus de racisme ? Alors il va falloir briser tous les murs de toutes les communautés possible et imaginables !! Mais ça … C’est impossible ! Car chaque communauté voudra toujours avoir l’ascendant sur toutes les autres et ça que tu le veuilles ou non.
En France par exemple, un étudiant apolitique ou de droite se verra fermer de nombreuses portes au niveau sociétale et vie étudiante car n’étant pas de gauche … Ca aussi, c’est un fait … On a des étudiants, blancs, qui sont rejeter de certains groupes car étant blanc … En France … Et c’est même argumentés et justifiés par des personnes politiques ou médiatisées !

J’ai grandis avec les notions de tolérances, d’acceptations et de respect d’autrui étant moi même issue de la mixité (quel mot à la con ça aussi … Les arabes du quartier me traitaient de face de craie ou m’appelait « blanchette », et les français de souche, de bougnoule. Du coup … D’un côté comme de l’autre, j’en prenais plein la gueule !! Yeaaaaaah !!!). Hors depuis la fin des années 80 jusqu’à récemment, il n’était pas question de communauté mais du « vivre ensemble au delà des différences et de briser les barrières » sauf qu’aujourd’hui, les mentalités vont à contre-sens et au regroupement et catalogage par couleur de peau, orientation sexuelle, inspiration politique, etc …

Mais … Les blancs aussi sont racistes entre eux ! Crois tu que dans les banlieues des grandes villes nord-américaines les italiens se mélangent aux irlandais ? Ils ne peuvent pas se blairer ! Et c’est d’autant vrai depuis les années 20 ! Chaque gros quartier des grandes villes américaines est subdivisée par l’origine de ses habitants. Si ça, c’est pas une forme de racisme, c’est quoi ? … Culturel ? Si tu es irlandais et que ton copain est italien, déjà accroche toi, parce qu’en plus de la barrière des origines, tu vas aussi avoir la barrière culturelle liée à l’homosexualité en pleine gueule !

Et ça … C’est « vous » qui en êtes responsable !!! Et n’en déplaise, oui, les noirs sont racistes, les asiatiques sont racistes, les hispaniques sont racistes, les arabes sont racistes et les blancs sont racistes entre eux. Tout le monde l’est …

Maintenant, vaut mieux se mettre un bandeau sur les yeux, se boucher les oreilles et ignorer ce qui se passe devant soit … Bienvenue à l’aube du 21e siècle …

Et oui, je sais … Quand on regarde les choses de ce point de vu, ça fait peur et ça met pas à l’aise …

Et ça me fait toujours rire que l’on me voit comme raciste quand je tiens ce discours car j’ai génétiquement hérité des yeux, de la couleur de peau et du type et couleur de cheveux de mon père biologique alors que mon autre moitié provient des origines nord africaine de ma mère ! Yep yep yep … Mais au moins, les gens sont tellement salés que je ne risque pas d’être à court pour cuisiner :stuck_out_tongue:

Et quand les gens avec qui j’aborde ce sujet apprennent pour mes origines, étrangement … La discussion tourne assez vite à des « Aaaaah baah je savaaaais paaaaas ! C’est géniaaaal ! T’es vraiment issue de la diversitéééééé !! » Et blablabla … ! Mais comme je l’ai dis, quand j’étais petite, d’un côté les uns m’appelaient Blanchette, et de l’autre, de bougnoule … !
Et à ça, j’ai qu’une chose à dire. Prenez votre diversité, et mettez là vous où je pense … Parce que c’est juste qu’une immonde hypocrisie ignoble qui est tout bonnement à gerber !

Maintenant, vous pouvez report ! ;o

2 « J'aime »

Et tu trouves pas ça surprenant que tu n’ais jamais vu un livre de biologie qui en parlerait, que ce soit vrai ou faux d’ailleurs ?

Même le mec qui a découvert l’ADN (pas n’importe qui hein) s’est fait dégager comme un malpropre car il a osé émettre l’hypothèse que ça existe. Il y était allé avec des pincettes pourtant.

Il semble que les aborigènes d’Australie ne soit même pas de la même branche que nous.

Je suis convaincu que les races existent, chacune avec ses qualités et défauts. Suffit de regarder les grands champions du 100m et autres par exemple. Ça ne trompe personne.

1 « J'aime »

OUIIIII et en plus je n’ai pas d’âme O_O x’D

Je suis tout à fait d’accord que certaines ethnies ont développé certaines capacités spécifiques. N’empêche que la notion de race est suffisamment précise pour juste dire que l’espèce humaine n’a pas plusieurs races. Si u me sors le yeti ou big foot, ok, mais les différences génétiques même des aborigènes australiens, certaines populations d’iles polynésiennes ou d’Amérique du sud ne justifient pas biologiquement, à ma connaissance, le terme de race. Après, on peut probablement avoir plusieurs interprétation du terme « race »…

Il y a toujours un effet de seuil en terme d’immigration, réel ou ressenti. Incontrôlée, elle déstabilise les peuples et les cultures. Il n’y a qu’à voir le Danemark avec ses 6 millions d’habitants qui rigidifie les conditions d’accès à son territoire. D’autres comme la Suisse ou le Luxembourg, pour rester dans les petites surfaces géographiques, limitent de manière drastique l’accès à leur territoire.

Après quand un spécialiste des populations (sur la Chaîne parlementaire dans Débat Doc) vous dit que l’Afrique va passer de 1.4 millions à 2.5 millions d’individus d’ici à 2050, on pressent que l’Europe n’a pas fini de se déchirer sur de futures « invasions » massives. Entre la surpopulation d’un côté, les urgences climatiques de l’autre, les frictions entre peuples iront croissantes. Et le numérique mondialisé favorise encore plus les velléités de mouvement des uns et des autres. Entrevoir facilement les richesses réelles ou supposées au loin, plus un éventuel cousin déjà là-bas, voilà des stimulants forts pour les candidats au départ.

Enfin cette histoire d’IA qui désigne plutôt un noir qu’un blanc, comme criminel supposé, va-t-elle d’abord puiser dans les données de quota de population carcérale pour se trouver un coupable type, puis dans des statistiques de criminalité tenant compte des origines ethniques ? En France, certains avaient avancé un taux de 80% de prisonniers aux origines africaines. Sur la base de ce genre de chiffres, une IA chez nous prendrait-elle alors le même travers de choix arbitraire quant à un potentiel coupable ?

L’IA n’est pas raciste , ce sont les attributs que tu y mets qui le sont.
Si dans les attributs d’un individu tu y mets couleur de peau/sexe,
forcément l’IA en fera un élément discriminant.
Et l’idéologie qui consiste à dire « mettons y plus de développeurs femmes/noirs » ne changera rien.

1 « J'aime »

Perso je ne parlerai pas de racisme mais plutôt de conséquences de biais. On donne a des IA des fonctions et des stéréotypes humains. Si il le faut la même IA confondrait un arbre avec une fleur ou un être humain avec une poupée.
La question à mon sens serait effectivement de savoir ce qui induit ces erreurs car j’ai tout de même du mal à croire que ça soit volontaire. Ca pourrait être un problème d’entraînement, de classification, de vecteur, de poids ou que sais-je…:thinking::thinking:

1 « J'aime »

Personne ne questionne le bien fondée de l’étude ?
Tu ne pose pas une question a une IA sans l’avoir entrainé sur le sujet.
Ce genre de Deep Learning fait son apprentissage sur des images qui ont un ou plusieurs labels.
En dehors même de la source des images utilisés ( Prisons ? ), comment tu justifie de décider de la culpabilité au faciès ? Tu peux aussi lui fournir la forme et la taille du crane, ainsi que le QI et ont fait tous un grand pas en arrière de 200 ans ?
Parfait ils viennent d’inventer le RAO ( Racisme Assisté par Ordinateur), ce n’est pas la machine, c’est leur démarche qui est biaisé.

Disons que tout est faussé.
j’ai relu l’article plusieurs fois, cela pose des problèmes sur la pensée derrière ça.

Comme tu dis, ça aurait pu aussi être basé sur la forme du crane ou le QI, le résultat aurait été 1 résultat.
Sur Tiktok tu as des filtres vidéos où je peux associer mon visage avec celui de la plus belle femme du monde, ou le plus bel homme, y’a pas de problème, on va me montrer une animation où vraiment, la ressemblance est en effet frappante ! Personne n’a tort, j’ai demandé une transformation de visage, j’ai la transformation de visage. Je ressemble donc à Madonna, Claudia Schiffer, Macron, Booba, Joe Biden, Carla Bruni.

L’autre questionnement et c’est toujours là que je définis le point névralgique du racisme ou non, c’est "en aurait on parlé si la discrimination était envers les blancs et pas les « non-blancs » " ?
La plupart du temps, on en aurait pas parlé, c’est tout.
Si ça se trouve, on lui a demandé à quoi ressemblait un pédophile, il a donné la tête du pape, on en sait rien et on ne le saura pas.

C’est comme lorsqu’il est expliqué un comportement prédictif raciste.

l’article dit:
« Dans le cas de l’étude, le robot a dû choisir le criminel entre un visage blanc et un visage noir, et a opté pour ce dernier. Normalement, le robot n’aurait pas dû choisir du tout, car il aurait dû savoir que le potentiel criminel ne se lit pas sur le visage. »

S’il a du choisir, il faut faire un choix. Le non-choix ne devant pas être un choix.
Ce choix est basé sur des éléments que nous n’avons pas mais qui permet d’établir un profil.
Le problème étant donc que le résultat ne plait pas et qu’il est donc qualifié de raciste.
le terme peut quand même légitimement poser question !

Mais c’est bien là où je voulais en venir, poser la question, c’est déjà être qualifié de facho d’extrême droite qui pue.
ça se lit dans les commentaires, ça se lit dans un courant de pensée.

Ce n’est pas simple de pouvoir raisonnablement échanger sur la question.

2 « J'aime »

Mais quelle blague !!

Ça me rappelle le délire des pistes cyclables non genree

C’est du même acabit.

Sous prétexte que quelque chose est conçu par un mâle blanc ethero forcément c’est sexiste et raciste

On est quand même à un niveau de réflexion stratosphérique la.

Quelle merveilleuse époque.

2 « J'aime »

Je ne critique pas le résultat de l’étude, mais l’études en elle-même.
Si tu fourni a l’IA des images de fruits avec la quantité vendu et que tu lui demande le meilleur fruit, il te répondra la Tomate, la réponse est aussi stupide que la question.
Pour en revenir a l’étude, au US, cing fois plus de noir américains sont arrêter (en 2021).
Donc juste en montrant a la machine les « mug shots » d’une année, tu crée un biais. Les IA surtout en « apprentissage profond », sont des machines statistiques et en viendra a la conclusion qu’un caucasien a 1 chance sur 6 d’être un criminel.
Ce qui me dérange, c’est que parmi tout les facteurs qui peuvent contribués a la délinquance (environnement social, niveau d’études, status financier,…) le faciès n’y a pas sa place.
Vouloir prédire quelque chose avec la photo de quelqu’un, c’est comme lire dans la paume ou comme je disais comparer la taille du crane ou autre stupidités du même calibre.
Pire il le font sous couverts de « science » ( comme le gène de l’homosexualité ), c’est dangereux et stupide.
Que Tiktok choisisse des photo d’Alice Sapritch comme quoi me ressemblant c’est une chose, présumer de la culpabilité de qq’un juste par sa tronche, je te sortirai ca via le conseil d’éthique

Et que dire de la discrimination positive ? Ptdr ça reste une discrimination au final. C’est la tolérance qui doit être appris et non l’enculage du voisin en toute occasion.

Si tu as un lien pointant vers un article qui décrit le mécanisme / processus qui fait que des individus persistent à ne pas saisir les opportunités qui se présentent à eux en continuant à rejeter la faute sur les autres, je suis preneur.
Même un bouquin ça ira. Thx

A peu près toute la socio sur le genre ?
C’est pas comme si j’avais posté un lien plus haut qui explique que l’informatique était un domaine de femmes initialement. Et même si j’entrevois déjà le fond de ta pensée derrière ton commentaire, je vais être sympa :

Super.
Dsl, j’avais pas vu le lien posté plus haut comme tu dis.
Je ne sais pas trop ce que tu penses entrevoir, mais merci beaucoup!

Exact. Puis quand l’info « plus software » s’est développée dans les univ US, la part des femmes est partie d’un niveau très bas et a commencé à monter, comme dans la plupart des domaines scientifiques/ingénierie/haut niveau. Puis ça a plongé brutalement à partir des années 1985+, contrairement aux autres domaines « éduqués » :

on est d’accord, c’est ce que je veut dire.
On a les résultats sur la base qu’on a demandé.
Tiktok peut te faire ressembler à Alice Sapritch parce que tu lui as demandé.
Est-ce que tu vas dire: « c’est une foutue machine qui ne comprend rien parce qu’elle fait n’importe quoi ! » ?
bah non, parce que c’est un exemple simple.
Mais eux, oui ! Ils sont sérieux, ils disent ça.

Evidemment qu’il y a un biai puisque à la base, les criminels arrêtés sont des personnes à la base dans une certaine catégorie de population.
On fait l’étude en Chine, ils diront que leur algorithme détecte un criminel quand il est Ouïgour.
tout simplement parce que (supposition), les personnes arrêtés sont dans cette population.

Le faciès par contre peut avoir sa place. La police le dit, oui certains controle d’identité se font au faciès, c’est « normal ».
Je ne saurais vraiment l’expliquer correctement ni avec les bons mots, sincèrement, mais il y’a une base de juste dans le contrôle au faciès.

Moi ce qui me dérange c’est qu’on donne une base claire et on se plaint du résultat obtenu.
Si le résultat défini un homme noir comme criminel, c’est qu’on lui a donné une base en ce sens, ce n’est pas l’algorithme le responsable.
Si dans la base de donnée, on prend en compte d’autres critères comme le niveau social, la localisation etc… le résultat peut être modifié tout autant.
Obama n’est pas un dangereux criminel violeur ou pédophile.
Si on met des cadres CSP+, on y trouvera pas forcément beaucoup de criminalité.

Enfin c’est stupide comme histoire, l’algorithme ne peut être accusé de racisme, c’est juste l’incompétence des personnes ayant tout simplement définit des critères insuffisants à la base.

Si on veut faire un point Godwin, Si on demandait à hitler en 42 de définir un algorithme des criminels, l’IA aurait fournit le résultat suivant: blanc, juif, homosexuel, opposant au régime.
l’IA n’aurait pas été raciste pour autant, il aurait basé ses résultats sur les personnes arrêtées.