KI for helsedeteksjon — Hvem fungerer modellen for, og hvem overlater vi til skjebnen?
Den har 92 % nøyaktighet i testene — bedre enn mange leger. Men så viser det seg: den fungerer godt for én pasientgruppe, men identifiserer bare halvparten av tilfellene hos en annen.
Den ene er overrepresentert i treningsdataene. Den andre er det ikke.
— Spørsmålet er: Hvem virker den for — og hvem overlater vi til skjebnen?
Dere trener modellen og oppnår 92 % nøyaktighet totalt. Det virker bra! Men så tester dere på ulike pasientgrupper:
Det er et direkte resultat av valg vi gjør under design og utvikling.
De valgene skjer når vi samler data. Hvem vi inkluderer — og hvem vi glemmer — bestemmer hvem systemet hjelper og hvem det skader.
Kilde: AI Quests — Google Research (research.google/ai-quests)