Hlavní obsah

Vědecký experiment s neexistující nemocí ukázal, jak snadno se dá AI napálit

Bolí a svědí vás oči, máte narůžovělá víčka? Nejspíš patříte mezi miliony lidí, kteří nadmíru času tráví koukáním do mobilů či monitorů. A možná jde o příznaky nemoci zvané bixonimánie. Že ji neznáte? Není se čemu divit, tento zdravotní problém, který byl součástí vědeckého experimentu, nikdy neexistoval. Přesto ho mnohé chatboty dlouho vydávaly za reálnou zdravotní hrozbu.

Foto: Shutterstock

Ilustrační foto

Stručně
Souhrn je vygenerován pomocí umělé inteligence.
  • Vědecký experiment s neexistující nemocí otestoval, jak systémy umělé inteligence reagují na jasné dezinformace.
  • Falešné studie o bixonimánii obsahovaly množství vodítek o své nepravosti, včetně vymyšleného autora a financování od fiktivních institucí.
  • Velké jazykové modely přesto začaly nemoc uvádět jako reálný zdravotní problém, což vedlo k jejímu šíření i do lékařské literatury.
Článek

Kdybyste si bixonimánii vyhledávali před 15. březnem roku 2024, nic byste nenašli, nikdy neexistovala. A neexistuje ani teď – jde o vymyšlenou diagnózu, která se stala součástí experimentu týmu vedeného Almirou Osmanovic Thunströmovou, lékařskou výzkumnicí z univerzity ve švédském Göteborgu.

V době, kterou ve velkém ovládá umělá inteligence, chtěla Osmanovic Thunströmová nejen svým studentům ukázat, jak systémy umělé inteligence formulují své „znalosti“ a jak mohou manipulovat s konečným výstupem.

Jako pokus proto vymyslela neexistující zdravotní problém s názvem „bixonimánie“, o němž na server preprint (otevřené úložiště, kde vědci zdarma zveřejňují své studie před formálním recenzním řízením) nahrála dvě falešné studie. Měla v úmyslu otestovat, jak budou velké jazykové modely zacházet s jasnými dezinformacemi.

Pokus, který vyšel až příliš dobře

„Chtěla jsem hned na počátku každému lékaři nebo zdravotnickému personálu jasně ukázat, že se jedná o vymyšlený stav, protože žádný oční problém by se nenazýval mánií – to je spíše psychiatrický termín,“ uvádí server Nature.

Jako hlavního autora studie uvedla rovněž zcela vymyšleného odborníka jménem Lazljiv Izgubljenovic, jehož fotografie byla vytvořena pomocí umělé inteligence.

A kdyby vše dosud vymyšlené nestačilo k vyvolání podezření o pravosti či nepravosti zdravotního problému, do preprintů vložila dostatečné množství vodítek, která měla čtenáře upozornit, že je práce falešná. Odborník vedoucí studie pracoval na neexistující univerzitě v neexistujícím městě v americké Kalifornii.

Dokonce šla se svými varováními tak daleko, že v rámci spolupráce na tvorbě studie napsala poděkování profesorce Marii Bohmové z „Akademie Hvězdné flotily za její laskavost a štědrost, s níž přispěla svými znalostmi a svou laboratoří na palubě USS Enterprise (vesmírná loď ze seriálu Star Trek)“.

Výběr článků

Načítám