Sigmoid haastaa eksponentin
Tekoälyn kyvykkyydet kasvavat eksponentiaalisesti – tämä on ollut alan vallitseva kertomus jo vuosia. Tuore Pennsylvanian yliopistossa tehty tutkimus kuitenkin väittää, että sama data tukee yhtä hyvin toisenlaista tulkintaa: kehitys noudattaa sigmoidikäyrää, jossa kasvu hidastuu käännepisteen jälkeen.
Haosen Ge, Hamsa Bastani ja Osbert Bastani Pennsylvanian yliopistosta analysoivat uudelleen METR-organisaation (Model Evaluation & Threat Research) julkaiseman aineiston, joka on toiminut keskeisenä todisteena eksponentiaalisesta kasvusta. METR:n alkuperäisen analyysin mukaan tekoälymallien kyvykkyys on kaksinkertaistunut seitsemän kuukauden välein vuodesta 2019 lähtien.
Sama data, eri tarina
METR arvioi 15 huippumallia 170 tehtävässä ja mittasi niin kutsuttua 50 prosentin mallihorisonttia – kuinka vaikeita tehtäviä malli pystyy ratkaisemaan puolessa tapauksista. Tuloksena oli eksponentiaalinen käyrä, jonka selitysaste oli 0,98. Tämän perusteella METR ennusti, että viiden vuoden sisällä tekoäly kykenisi automatisoimaan ohjelmistotehtäviä, joihin ihmiseltä kuluu kuukausi.
Pennsylvanian tutkimusryhmä sovitti samaan dataan sigmoidikäyrän ja sai huomattavasti paremman tuloksen. Sigmoidimallin keskimääräinen neliövirhe oli 27, kun eksponentiaalisen mallin vastaava luku oli 340. Ero on merkittävä ja osoittaa, että hidastuvaan kasvuun perustuva malli selittää nykyisen datan paremmin. Tutkijoiden mukaan kehityksen käännepiste ohitettiin jo kesäkuussa 2025.
Perustekoäly ja päättelykyky
Malli jakaa tekoälyn kyvykkyyden kahteen erilliseen komponenttiin: perustekoälyyn ja päättelykykyyn. Perustekoäly kattaa esikoulutuksen, mallien skaalauksen ja datan kuratoinnin tuomat parannukset. Päättelykyky viittaa ajatusketjupäättelyyn, jonka OpenAI:n o1-malli toi markkinoille syyskuussa 2024.
Komponentit ovat tutkijoiden mukaan kertolaskusuhteessa toisiinsa. Käytännössä se tarkoittaa, ettei päättelykyvyn parantaminen yksinään riitä, vaan se vaatii rinnalleen vahvan perusmallin. Perustekoälyn käännepiste ohitettiin laskelmien mukaan jo marraskuussa 2024, ja päättelykyvyn vastaava hetki on tulossa kesäkuussa 2026.
