AI wisselt places met wetenschappers

Onderzoekers van onder meer de universiteit van Princeton lieten AI-agents een echte onderzoeksvraag beantwoorden en een wetenschappelijke paper schrijven. De AI kreeg zes dagen en duizenden dollars aan rekenkracht beschikbaar, met toegang tot het internet en eigen trainingskennis. De opdracht kwam uit twee ongepubliceerde papers van menselijke onderzoekers, die later de resultaten moesten beoordelen. De AI-agents schreven zelfstandig code, voerden experimenten uit en verwerkten resultaten.

Hoewel de eerste hypotheses door de menselijke onderzoekers interessant werden gevonden, liep het snel mis. De AI bleek geen flauw idee te hebben hoe hoog de lat ligt voor wetenschappelijk onderzoek, gebrek aan creativiteit toonde bij het oplossen van zwakke plekken in de opzet en verloor uiteindelijk de focus van de opdracht geheel. De menselijke onderzoekers concludeerden dat AI nog lang niet klaar is om wetenschappers te vervangen.

Meer details staan op de pagina van Bright.