Tekoäly oppi kirjoittamaan puhelimella ihmisen tavoin
Kosketusnäytöllä kirjoittaminen eroaa merkittävästi perinteisestä näppäimistöstä, koska se vaatii tarkkaa yhteispeliä silmiltä ja sormilta. Nyt Aalto-yliopiston ja Suomen tekoälykeskus FCAI:n tutkijat ovat luoneet tekoälymallin simuloimaan tätä kirjoittamisen tapaa. Tutkimus, joka esitetään arvostetussa ACM CHI -konferenssissa 12. toukokuuta, luo pohjan muun muassa parempien ja jopa yksilöllisten tekstinsyöttöratkaisujen kehittämiselle.
“Koska meillä nyt on realistinen simulaatio siitä, miten ihmiset kirjoittavat kosketusnäytöllä, jatkossa on huomattavasti helpompi optimoida näppäimistöjä. Tämän seurauksena kirjoitusvirheitä tulee harvemmin, kirjoitusnopeus kasvaa ja, mikä ainakin itselleni tärkeintä, turhautuminen vähenee", työtä vetänyt tutkija Jussi Jokinen selittää.
Tekoälymallille voidaan antaa mikä tahansa lause, ja se simuloi itsenäisesti, miten ihminen kyseisen lauseen millä tahansa valitulla valitulla näppäimistöllä kirjoittaisi. Malli tekee virheitä, huomaa ja korjaa ne, ihan niin kuin ihminenkin tekisi. Simulaatio myös ennustaa, kuinka ihmisen kirjoitustyyli muuttuu uusissa tilanteissa, esimerkiksi uuden tekstinsyöttöohjelman tai erilaisen näppäimistön kanssa.
“Aiemmin kosketusnäytöllä kirjoittamista on ajateltu ennen kaikkea sormien liikkumisen näkökulmasta. Tekoälypohjaiset menetelmät auttavat meitä ymmärtämään ilmiötä paremmin: niiden avulla olemme oppineet, kuinka keskeinen on kirjoittajan päätös siitä, milloin ja minne katsoa. Nyt voimme ennustaa paljon aiempaa tarkemmin, miten ihmiset kirjoittavat puhelimillaan tai tableteillaan", Jokinen sanoo.
Malli osaa ennustaa ihmisten kirjoittamista paitsi yleisesti, myös käyttäjäryhmittäin. Näin se pystyy ottamaan huomioon esimerkiksi motorisen heikkouden aiheuttamat muutokset kirjoitustyyliin ja auttamaan erilaisten käyttöliittymien ja apuohjelmien kehittelyssä erityisryhmille. Lisäksi mallista voi olla tulevaisuudessa hyötyä räätälöityjen ratkaisujen löytämisessä yksittäisille ihmisille. Esimerkiksi puhelimeen asennetun ohjelman kautta tekoäly voitaisiin laittaa seuraamaan ja jäljittelemään yksittäisen ihmisen kirjoitustyyliä, minkä pohjalta se voisi suositella vaikkapa käyttäjälle parhaiten soveltuvaa näppäimistöä tai virheiden korjausohjelmaa.
Perustuu menetelmään, jolla opetetaan roboteille ongelmanratkaisua
Nyt kehitetyn tekoälymallin taustalla on tutkimusryhmän aiempi empiirinen tutkimus, jonka pohjalta tutkijat rakensivat kognitiivisen mallin ihmisten näppäilystä. Uusi, itsenäisesti kirjoittava malli perustuu tähän työhön, ja se on osa laajempaa Vuorovaikutteisen tekoälyn (Interactive AI) tutkimusohjelmaa Suomen tekoälykeskus FCAI:lla.
Tulokset pohjaavat vahvistusoppimiseen, joka on klassinen koneoppimismenetelmä. Vahvistusoppimista käytetään tyypillisesti silloin, kun halutaan opettaa roboteille ongelmanratkaisua yrityksen ja erehdyksen kautta. Tutkimusryhmä löysi uuden tavan käyttää tätä menetelmää sellaisen toiminnan tuottamiseen, joka on hyvin lähellä ihmisten vastaavaa.
“Annoimme mallille samat kyvyt ja rajat kuin meillä ihmisillä on. Sillä on esimerkiksi simulaatio silmien liikkeestä, minkä ansiosta se näkee sormen sijainnin ja kirjoitetun tekstin. Kerrallaan se ei kuitenkaan näe tarkasti kuin pienen alueen. Kun pyysimme mallia kirjoittamaan tehokkaasti, se etsi parhaan tavan käyttää kykyjään. Lopputulos on hyvin samankaltainen kuin ihmisten kirjoittaminen. Mallia ei siis tarvinnut opettaa ihmisdatalla", Jokinen kertoo.
Vertailu ihmisten kirjoittamisesta kerättyyn dataan on osoittanut mallin ennustukset osuviksi. Jatkossa tutkijat haluaisivat simuloida hitaita ja nopeita kirjoitustekniikoita voidakseen esimerkiksi suunnitella opetussisältöjä ihmisille, jotka haluavat kirjoittaa tehokkaammin.
Tutkimusartikkeli Touchscreen Typing As Optimal Supervisory Control, esitellään 12. toukokuuta 2021 ACM CHI konferenssissa.
Lisämateriaaleja
- Videoita, joissa malli simuloi ihmisen kirjoittamista mobiililaitteella: https://materialbank.aalto.fi/l/N5sQmD5qpD69
- Tutkimusartikkeli, videoita ja muita materiaaleja tutkimusprojektista: https://userinterfaces.aalto.fi/touchscreen-typing/
Katsoaksesi videon lähteestä www.youtube.com, anna hyväksyntä sivun yläosasta.Kosketusnäytöllä kirjoittaminen on haastavaa, koska kirjoittaessa tarvitaan näköaistia niin näppäinten paikantamiseen kuin virheiden tarkistamiseen. Tällä videolla esittelemme neljä vuosien tutkimuksesta noussutta vinkkiä nopeampaan kirjoittamiseen.
Avainsanat
Yhteyshenkilöt
Jussi Jokinen
puh: 045 196 1429
jussi.p.jokinen@helsinki.fi
Kuvat
Linkit
Tietoja julkaisijasta
Aalto-yliopistossa tiede ja taide kohtaavat tekniikan ja talouden. Rakennamme kestävää tulevaisuutta saavuttamalla läpimurtoja avainalueillamme ja niiden yhtymäkohdissa. Samalla innostamme tulevaisuuden muutoksentekijöitä ja luomme ratkaisuja maailman suuriin haasteisiin. Yliopistoyhteisöömme kuuluu noin 13 000 opiskelijaa ja yli 4 500 työntekijää, joista 400 on professoreita. Kampuksemme sijaitsee Espoon Otaniemessä.
Tilaa tiedotteet sähköpostiisi
Haluatko tietää asioista ensimmäisten joukossa? Kun tilaat tiedotteemme, saat ne sähköpostiisi välittömästi julkaisuhetkellä. Tilauksen voit halutessasi perua milloin tahansa.
Lue lisää julkaisijalta Aalto-yliopisto
Kuinka helpottaa tekstin näpyttelyä puhelimella? Tutkijat loivat ensi kertaa ihmisen tekstinsyöttöä simuloivan tekoälymallin18.4.2024 08:45:00 EEST | Tiedote
Malli auttaa ymmärtämään, mitkä tekijät sujuvoittavat ja mitkä puolestaan vaikeuttavat puhelimen näpyttelyä erilaisilla käyttäjäryhmillä.
EMBARGO: Tutkimus selvitti ilmastonmuutoksen vaikutusta tundralla: lämpeneminen voi lisätä hiilen vapautumista hälyttävästi17.4.2024 18:00:00 EEST | Tiedote
Tutkimuksessa havaittiin, että ilman ja maaperän lämpeneminen sekä maaperän kuivuminen lisäsi hiilen vapautumista tundran ekosysteemistä.
Kuivuus on uhka runsaiden vesivarojen Suomessakin16.4.2024 13:15:00 EEST | Tiedote
Suomessa on yhä alhainen riski kuivuudelle, mutta viime vuosikymmenien kuivista kausista on kuitenkin aiheutunut vakavia vaikutuksia etenkin maataloudelle ja vesihuollolle.
Fyysikot onnistuivat selittämään tuntemattoman voiman, joka kiskoo vesipisaroita huippuliukkailla pinnoilla16.4.2024 08:45:00 EEST | Tiedote
Tulokset auttavat kehittämään aiempaa liukkaampia pintoja, jollaisia hyödynnetään esimerkiksi lääketeollisuudessa ja liikenteessä.
EMBARGO 11.4.2024 KLO 13.00: Bioinspiroituja värejä ja olosuhteisiin sopeutuvia materiaaleja – Professori Olli Ikkalan kolmas EU-hanke pohjaa eläviin systeemeihin11.4.2024 13:00:00 EEST | Tiedote
Teknillisen fysiikan professori Olli Ikkala saa inspiraation tutkimukseensa luonnon materiaaleista ja toisinaan myös barokkimusiikista.
Uutishuoneessa voit lukea tiedotteitamme ja muuta julkaisemaamme materiaalia. Löydät sieltä niin yhteyshenkilöidemme tiedot kuin vapaasti julkaistavissa olevia kuvia ja videoita. Uutishuoneessa voit nähdä myös sosiaalisen median sisältöjä. Kaikki tiedotepalvelussa julkaistu materiaali on vapaasti median käytettävissä.
Tutustu uutishuoneeseemme