Perplexity ja Harvard Business School julkaisivat 8. kesäkuuta tutkimuksen, jossa seurattiin Perplexity Computer -agentin käyttöä helmikuun julkaisusta toukokuun loppuun. Aineisto on poikkeuksellisen iso: 10 000 paritettua hakukone- ja agenttitehtävää, 8 000 käyttäjää kahdeksasta ammattiryhmästä, 100 000 satunnaisesti valittua agenttikyselyä.
Tutkimuksen kärkiluku on suhde 48:1. Agentti suoritti yhdessä sessiossa keskimäärin 26 minuuttia itsenäistä konetyötä. Hakukoneessa sama mittari oli 33 sekuntia. Mediaaneissa ero oli 9 minuuttia vastaan 14 sekuntia.
Aikaa säästyy 87 %, rahaa 94 %
Kun samojen tehtävien koko työnkulku laskettiin yhteen, ihminen mukana molemmissa, kokonaisaika tipahti 269 minuutista 36 minuuttiin. Kustannukset putosivat 94 prosenttia. Ohjelmointitehtävissä mittarit kärjistyivät vielä: aikaa säästyi 92 prosenttia, rahaa 96 prosenttia.
Tutkijat varmistivat luvut kolmella menetelmällä: työkalupohjaisella luokituksella, kielimallin aika-arviolla ja 25 aktiivikäyttäjän haastattelulla. Erot pysyivät samansuuntaisina kaikilla menetelmillä, mikä kertoo tulosten kestävyydestä.
Käyttäjän työtaakka jakautui agentin kanssa myös eri tavalla. Agentti pysähtyi pyytämään syötteitä 13 kertaa useammin kuin hakukone, mutta käyttäjien keskeyttämisaste pysyi käytännössä samana, 3,7 prosenttia vastaan 3,4 prosenttia. Pidempi koneellinen suoritus ei siis vienyt käyttäjän huomiota.
Tutkimuksen kärkilöytö
Bloomin taksonomialla mitattuna 50 prosenttia agenttikyselyistä yltää korkeimmalle Create-tasolle. Hakukoneessa osuus jää 26 prosenttiin. Käyttäjät pyytävät agentilta luomista, eivät pelkkää hakua.
Agentti nostaa kunnianhimoa, ei pelkkää vauhtia
Kiinnostavin havainto ei ole säästöprosentti vaan käyttäjien käytöksen muutos. Tutkimuksen mukaan 38 prosenttia agenttikyselyistä koski tehtäviä, joita käyttäjät eivät olleet aiemmin edes yrittäneet hakukoneella. Painopiste oli ohjelmistokehityksessä ja sisällöntuotannossa.
Käyttäjät hyödynsivät agenttia 38 prosenttia useammalta osaamisalueelta kuin hakukonetta. O*NET-luokituksella mitattuna työtehtäväala laajeni 32–60 prosenttia. Agentti ei siis pelkästään nopeuttanut samaa työtä vaan houkutteli kokeilemaan oman alan ulkopuolelta.
“Computer suorittaa keskimäärin 26 minuuttia koneellista työtä per sessio. Hakukoneella vastaava luku on 33 sekuntia.”
Sanasto
Tekoälyagentti
Tekoälyohjelma, joka pystyy itsenäisesti suorittamaan monivaiheisia tehtäviä: selaamaan verkkoa, käyttämään työkaluja ja tekemään päätöksiä matkan varrella ilman jatkuvaa ohjausta.
Bloomin taksonomia
Kasvatustieteen luokittelu, joka jaottelee ajattelutehtävät vaikeustasoittain. Alimmilla tasoilla on tiedon mieleen palauttaminen ja ylimmällä (Create) uuden luominen.
Mitä tämä kertoo suomalaisesta tietotyöstä
Yritin tavoittaa suomalaista työn murrosta tutkivaa asiantuntijaa kommenttia varten torstaiaamuna. En saanut häntä kiinni ennen julkaisua, joten suomalainen tutkijanäkökulma jää seuraavaan juttuun. Numerot kannattaa silti pysähtyä lukemaan.
Jos suomalainen asiantuntija tekee tehtävän neljässä tunnissa ja agentti puolessa tunnissa, säästöä ei välttämättä jaeta lyhennettyinä työpäivinä. HBS-aineiston perusteella aika menee uusiin, vaativampiin projekteihin – juuri niihin, joita kukaan ei aiemmin ehtinyt tehdä.
Tämä koskettaa konsultti-, asianajo- ja insinööritoimialaa, joiden talous on rakennettu veloitettaville tunneille. Kun asiakas saa saman lopputuotteen 36 minuutissa eikä 269 minuutissa, hinnoittelu kuluneilta tunneilta murenee. Markkina siirtyy ajan myynnistä tuloksen myyntiin.
Toinen seuraus: pienen toimiston tuottavuus voi yltää suuren tasolle. Helsinkiläinen kahden hengen lakitiimi voi tehdä työn, johon ennen tarvittiin kymmentä juristia. Erikoistumiselle avautuu markkinoita, jotka olivat aiemmin liian kapeita kannattaviksi.
Mihin numeroita ei kannata venyttää
Asetelma on havainnoiva, ei satunnaistettu koe. Käyttäjät valikoituvat itse Computerin kokeilijoiksi, mikä todennäköisesti painottaa otosta varhaisiin omaksujiin. Tutkijat itse korostavat tätä rajoitetta raportissa.
Sata tuhatta kyselyä on iso aineisto. Se kertoo, mihin agentti pystyy parhaimmillaan. Se ei kerro, paljonko keskimääräinen toimisto saa irti agentista ensimmäisenä käyttövuotenaan. Tämä ero on Suomessa vielä vuosien työsarka.
Viikoittainen uutiskirje
Tule firmasi fiksuimmaksi AI-osaajaksi
Yksi uutiskirje kerrallaan. Kokoamme viikon tärkeimmät tekoälyuutiset suomeksi ja kerromme, mitä ne tarkoittavat sinun työsi kannalta. Luet sen kahvitauolla.
