Az Amazon a munkaerő-toborzást folyamatát próbálta automatizálni, ezért egy olyan programot kezdett fejleszteni, ami automatikusan értékeli a cégnek beküldött önéletrajzokat, és csak a rostán átmenő néhány jelentkezést juttatja tovább a hr-osztálynak.
Élesben is kipróbálták
A gépi tanulás elvén működő program ugyanis valamikor – egyelőre ismeretlen okból – arra jutott, hogy a férfi munkavállalókat kell előnyben részesítenie a nőkkel szemben. Ezután automatikusan rosszabbnak minősítette a női jelentkezőket: két azonos önéletrajz közül alacsonyabb pontszámot adott annak, amelyiken női név, illetve más, női jelentkezőre utaló részlet szerepelt.
Teljesen megbízhatatlannak bizonyult
A Reuters szerint elképzelhető, hogy az AI azért diszkriminálta a női jelentkezőket, mert a férfiak átlagosan magabiztosabban nyilatkoztak a saját teljesítményeikről az önéletrajzukban – gyakrabban használtak olyan kifejezéseket, mint hogy „végrehajtottam”, vagy „megszereztem”. A gép tehát a bevallott teljesítményt összekötötte a jelentkező nemével, és azt a következtetést vonta le, hogy a nők nyilván női mivoltukból fakadóan rosszabb teljesítményt nyújtanak.
Nem ez volt az egyetlen hiba a programmal, az Amazon-alkalmazottak beszámolója szerint az rendszeresen ajánlott képzetlen jelentkezőket mindenféle munkára. Mint mondták, idővel már úgy tűnt, mintha véletlenszerűen dobna vissza vagy választani ki jelentkezéseket.