Kehitys teko?lyn saralla on edennyt suurin harppauksin varsin lyhyess? ajassa, mutta teht?v?? on viel? paljon. Johtavat tuotteet ja palvelut, kuten ChatGPT ja Claude Sonnet, tarjoavat eritt?in vaikuttavia ominaisuuksia, mutta niill? on my?s merkitt?vi? rajoituksia. OpenAI:n kehitt?m? Project Strawberry pyrkii ratkaisemaan t?m?n ongelman.
Reuters raportoi 15.7.2024, ett? ChatGPT:n luoja OpenAI ty?skentelee uudenlaisen teko?lymallin parissa osana ”Project Strawberrya”, joka tunnetaan my?s nimell? ”Q*”.
Projektin puitteissa on tavoitteena tuoda suurille kielimalleille parempi kyky p??tell? asioita annetuista koulutusaineistoista.
Vaikka Project Strawberrysta perill? oleva l?hde ei vahvistanut, milloin se varsinaisesti julkaistaan, jakoi h?n sis?isi? asiakirjoja, jotka paljastivat joitakin perustietoja hankkeesta.
Techopedia yritti saada tarkempia tietoja OpenAI:lta, mutta maailman johtava AI-startup ei ainakaan heti vastannut haastattelupyynt?ihin.
Mit? tied?mme OpenAI Project Strawberrysta
T?ll? hetkell? tiedot Strawberrysta ovat v?h?isi?, mutta yksi Reutersin n?kemist? asiakirjoista kuvailee projektia tarkemmin. Siin? Strawberryn luomat AI-mallit selaavat interneti? itsen?isesti, erilaista tutkimusta suorittaen.
T?m? antaisi mallille mahdollisuuden selata interneti?, ker?t? tietoa artikkeleista ja muusta sis?ll?st?, jota se voisi taas k?ytt?? p??ttelykykyns? ja tiedonk?sittelyns? jatkuvaan parantamiseen.
Yksi Reutersin l?hteist? mainitsi, ett? Strawberryssa on yht?l?isyyksi? Stanfordissa vuonna 2022 kehitetyn Self-Taught Reasoner (STaR) -tekniikan kanssa. STaR-tekniikan avulla malli voi luoda itsen?isesti omia koulutusaineistojaan ja tulla ajan my?t? ?lykk??mm?ksi.
L?hde v?itti lis?ksi, ett? sis?isten asiakirjojen mukaan OpenAI suunnittelee Strawberry? suorittamaan pitk?kestoisia teht?vi? — monimutkaisia teht?vi?, jotka vaativat mallilta sarjan tiettyj? toimintoja. T?m? antaisi mallille suuremman itsen?isyyden verrattuna nykyisiin LLM-malleihin.
Copyleaksin toinen perustaja ja toimitusjohtaja Alon Yamin kertoi Techopedialle:
”OpenAI:n ‘Strawberry-projekti tarkoittaa merkitt?v?? askelta teko?lyn parissa ja sen kyvyiss?. T?m? saattaa mullistaa tavan, jolla olemme vuorovaikutuksessa generatiivisen teko?lyn kanssa ja kuinka se kykenee ratkaisemaan monimutkaisia ongelmia. Vaikutukset tutkimukseen, ohjelmistokehitykseen ja jopa tieteellisiin l?yt?ihin ovat valtavia. Jos pyrimme t?h?n uuteen suuntaan, meid?n on jatkettava kattavien suojamekanismien k?ytt??nottoa. N?iden mekanismien avulla varmistetaan, ett? teko?lyn kehityst? hy?dynnet??n vastuullisesti, jotta voidaan minimoida mahdolliset riskit ja maksimoida sen positiivinen vaikutus yhteiskuntaan.”
Miksi Project Strawberry on t?rke??
Mik?li raportoidut tiedot pit?v?t paikkansa, tarkoittaa se sit?, ett? OpenAI:n kielimallit ovat kehittym?ss? siten, ett? ne pystyv?t oppimaan asioita itsen?isemmin ja suorittamaan monivaiheisia teht?vi?.
T?t? l?hestymistapaa k?ytt?vi? kielimalleja olisi helpompi k?ytt?? automatisoimisessa kuin nykyisi? LLM-malleja, jotka taas vaativat paljon ihmisten valvontaa. K?ytt?jien ei ainoastaan tarvitse antaa komentoja ChatGPT:lle, vaan heid?n on my?s tarkistettava sen vastaukset varmistaakseen, ettei niiss? ole hallusinaatioita ja virheellisi? v?itt?mi?.
T?m? johtuu siit?, ett? LLM-kielimallit eiv?t ajattele itsen?isesti kuten ihmiset. Ne on koulutettu oppimaan tunnistamaan ihmiskielen malleja ja ennustamaan vastauksia sy?tteisiin. T?m?n seurauksena ne eiv?t ajattele samalla tavalla kuin ihminen, eik? niill? ole k?sityst? maalaisj?rjest? tai logiikasta.
?l? innostu liikaa viel? – paljon kysymyksi? ilmassa
On selv??, ett? Strawberry tuo teko?lyn markkinoille ainakin joitakin uusia ominaisuuksia, mutta t?ss? vaiheessa on t?rke?? olla innostumatta liikaa. Ennen GPT-4o-kielimallin julkaisua liikkui paljon huhuja my?s GPT-5:n julkaisemisesta.
Vaikka GPT-4o on ollut selke? edistysaskel LLM-markkinoilla, se ei ole onnistunut erottumaan riitt?v?sti muista suosituista kielimalleista, kuten Claude 3 Opuksesta/Sonnetista tai Geminist?.
T?st? huolimatta, jos Strawberry tuo mukanaan uusia ominaisuuksia, jotka voivat parantaa LLM-kielimallien p??ttelykyky?, se otetaan mielihyvin vastaan markkinoilla.
Samalla tavalla teko?lyn kehittymist? seuraavat ihmiset ovat innostuneet tiedonhakuun pohjautuvasta generoinnista (RAG) ja monista muista tekniikoista.
Project Strawberryn pitk?n aikav?lin vaikutukset
Kunnes saamme vahvistuksen OpenAI:n toimesta Project Strawberryn olemassaolosta, on vaikea arvioida tarkkaan sen pitk?n aikav?lin vaikutuksia. Onko projekti edes oikeasti olemassa ja mit? kaikkea siihen kuuluu?
Jos huhuissa py?riv?t tiedot ovat oikeita, se tarkoittaisi sit?, ett? LLM-kielimallit kehittyv?t ihmisten avustamista kielimalleista kohti itsen?isempi? versioita. N?in ne kykenisiv?t luomaan omia koulutusaineistoja ja suorittamaan teht?vi? mahdollisimman v?h?isell? ihmisten avustuksella.
Laajemmasta n?k?kulmasta katsottuna harjoitusdatan luomisen automatisointi voisi v?hent?? teko?ly- ja koneoppimistutkijoiden ty?m??r?? merkitt?v?sti. Heid?n ei en?? tarvitsisi ker?t? datan?ytteit? samalla tavalla kuin aikaisemmin, mik? saattaisi lis?t? kielimallien kehityksen nopeutta.
Kyky hoitaa monimutkaisia automaatioteht?vi? avaisi ovia uusille k?ytt?tapauksille esimerkiksi ohjelmistokehityksess?.
T?llainen l?hestymistapa voi my?s lis?t? yleisiin teko?lymalleihin liittyvi? riskej?. Jos mallit ovat itsen?isempi?, ihmisen valvonta ja hallinta v?henev?t v?ist?m?tt?. T?m? her?tt?? kysymyksi? esimerkiksi sen suhteen, voidaanko teko?lyn tuottamaa harjoitusdataa ja itsen?isi? toimia pit?? vastuullisen teko?lyn kehityksen mukaisina.
Ainakin Strawberry pystyisi vastaamaan monimutkaisempiin kysymyksiin, mik? olisi pieni askel OpenAI:n matkalla kehitt?? yleisteko?ly? (AGI), joka l?hentelisi jo ihmisen ?lykkyytt?.
Project Strawberry – yhteenveto
Generatiivinen teko?ly on edelleen t?ynn? yll?tyksi?. Juuri t?ll? hetkell? el?mme sen osalta kuitenkin hyvin rauhallista aikaa, sill? mit??n sen suurempia edistysaskelia ei olla n?hty v?h??n aikaan.
T?m? saattaa kuitenkin muuttua hetkell? min? hyv?ns?, sill? eri yrityksill? on k?ynniss? melkoinen kilpailu ja kujanjuoksu AI-teknologian kehitt?misen suhteen. Uusia teko?lyn ominaisuuksia ja kykyj? tullaan viel? varmasti n?kem??n ja samalla teko?lyll? automatisoitavien ty?teht?vien m??r? kasvaa v?ist?m?tt? tulevaisuudessa.