Uudet ihmisen ja tekoälyn vuorovaikutukset. Miten tekoäly muuttaa tapaamme käyttää laitteita? | Tekoäly liiketoiminnassa #22

Miten älykkäät käyttöliittymät (IUIt) toimivat tekoälyvuorovaikutuksissa?

Älykkäät käyttöliittymät (IUIt) ovat käyttöliittymiä, jotka hyödyntävät tekoälyvuorovaikutustekniikoita parantaakseen ihmisten kokemusta laitteista. IUIt voivat esimerkiksi tunnistaa käyttäjän puheen tai eleet, mukautua mieltymyksiin aiempien tekoälyvuorovaikutusten analyysin perusteella tai auttaa tehtävien suorittamisessa. Tavoitteena on luoda intuitiivinen ja luonnollinen tapa kommunikoida elektronisten laitteiden kanssa, eli luonnollinen käyttöliittymä (NUI). Vaikka tällaisen käyttöliittymän käyttäminen vaatii myös oppimista, se on luontaisesti helpompaa, mikä antaa tunteen siitä, että kaikki tapahtuu luonnollisesti ja että itse käyttöliittymä on näkymätön.

Tänä päivänä kosketusliittymät ovat laajimmin käytössä ja ääniliittymät ovat kehittyneimpiä. Lupaavia tulevaisuuden kehityksiä ovat eleiden tunnistus VR:ssä ja AR:ssä, älylaitteet ja aivo-kone -liittymät.

Esimerkkejä IUI-sovelluksista ovat älykkäät ääniohjaajat, kuten Siri tai Alexa, jotka ymmärtävät ääneen esitettyjä kysymyksiä ja antavat vastauksia tai seuraavat komentoja. Muita esimerkkejä ovat IUIt, jotka käyttävät antureita kehon liikkeen, eleiden tai katseen seuraamiseen laitteiden ohjaamiseksi. Niissä on:

• Luonnollisen kielen käsittely (NLP) puheen ymmärtämiseksi ja luomiseksi,
• Kuvantunnistus (tietokonenäkö) visuaalisten materiaalien tulkitsemiseksi,
• Koneoppiminen (ML) kaavojen tunnistamiseksi ja käyttäytymisen ennustamiseksi.

Voit soveltaa koneoppimista muun muassa tulkitsemaan älykkäiden kuulokkeiden avulla tallennettuja aivoaaltoja. Tämä ratkaisu on kehitetty Neurable-yhtiön toimesta luomaan työskentelyyn tarkoitetut kuulokkeet, jotka havaitsevat keskittymisen hetket ja mahdollistavat optimaalisen ajan ja olosuhteiden tarkan määrittämisen keskittymistä varten. Lisäksi keskittymisen aikana Neurable-kuulokkeet mykistävät automaattisesti saapuvat puhelut ja antavat sinun siirtyä seuraavaan kappaleeseen, jota kuuntelet ajatuksissasi.

Lähde: Neurable (https://neurable.com/headphones)

Liiketoimintasovellukset kosketusliittymille

Kosketusliittymät ovat äärimmäisen suosittuja monipuolisuutensa vuoksi. Siksi liiketoiminta on siirtynyt nopeasti älypuhelimien ja kodinkoneiden näyttöjen ulkopuolelle. Ne ovat yhä yleisempiä lippu- tai välipalahautomaatteissa, lukkoissa ja lentokenttäportilla.

Napauttaminen, pyyhkäisy, vetäminen, pitkään painaminen – nämä ovat vain joitakin eleistä, jotka hallitsevat digitaalista kokemustamme. Niiden avulla voimme sekä kirjoittaa näytöllä näkyvällä näppäimistöllä, painaa painikkeita että navigoida yhden tai useamman sormen tai jopa koko käden liikkeiden avulla.

Tekoälyn avulla kosketuslaitteet ovat tulleet yhä oletusarvoisemmiksi, täydentäen liikkeitä, joita laite ei tunnista oikein. Ne yhdistävät tietoja kosketusliittymästä kameran tunnistamiin eleisiin, parantaen käyttäjäkokemuksen sujuvuutta ja huomaamattomasti lisäämällä laitteiden käytön miellyttävyyttä ja turvallisuutta.

Kolmiulotteiset eleet, virtuaalitodellisuus ja lisätty todellisuus tekoälyvuorovaikutuksilla

Eleiden tunnistuksen ansiosta toimimme yhä enemmän pelkästään liikkeen avulla kosketusvapaissa tekoälyvuorovaikutuksissa ovien, kylpyhuoneen pesualtaiden tai auton näyttöjen kanssa. Autoteollisuus on myös laajentamassa sovellustaan. BMW esitteli äskettäin eleohjausominaisuuden kosketusvapaalla näytöllä, jolla voidaan hallita auton äänenvoimakkuutta, puheluja ja muita toimintoja.

On myös syytä huomata, että julkisissa paikoissa on saatavilla ohjelmistoja kosketusvapaaseen laitteiden käyttöön. Markkinoilta löytyy:

• TouchFree – ohjelmointi, joka mahdollistaa yrityksille olemassa olevien Windows-pohjaisten kioskien ja kosketusnäyttöjen päivittämisen kosketusvapaaseen eleohjaukseen,
• Banuba – ratkaisu elepohjaiseen toimintaan tilassa, kuten tuotteen valitseminen sormella osoittamalla tai ostoskoriin lisääminen peukalon ylös -eleellä, joka on erityisen kätevä liikkeissä, joissa on lisättyä todellisuutta hyödyntäviä teknologioita, joissa voit esimerkiksi sovittaa virtuaalivaatteita,


Lähde: Banuba (https://www.banuba.com/solutions/touchless-user-interface)

Itse asiassa tekoälyvuorovaikutuksilla on keskeinen rooli eleohjauksessa virtuaalitodellisuudessa (VR) ja lisätyssä todellisuudessa (AR). Tekoäly tunnistaa tässä kehon asennon ja tulkitsee käyttäjien liikkeitä ja eleitä, mikä mahdollistaa luonnollisen vuorovaikutuksen virtuaalisten objektien ja ympäristöjen kanssa käsillä tai ohjaimilla. Esimerkki on Oculus Quest 2, VR-lasit, joissa on kamerat, jotka seuraavat käsien liikkeitä intuitiivisesti ohjaamaan objekteja virtuaalisessa maailmassa. VR- ja AR-ominaisuudet liiketoiminnassa:

• koulutuksessa ja simulaatioissa, joissa eleohjaus mahdollistaa luonnollisemman ja intuitiivisemman tekoälyvuorovaikutuksen,
• 3D-mallien manipuloinnissa suunnittelu- ja insinöörityössä, mukaan lukien tiimissä, joka ei sijaitse yhdessä fyysisessä tilassa,
• ostoksissa ja verkkokauppapresentaatioissa – yritykset käyttävät AR:ää luodakseen interaktiivisia ostokokemuksia, joissa asiakkaat voivat käyttää eleitä tuotteiden ja tietojen selaamiseen.

Yksi viimeisimmistä esimerkeistä tekoälyvuorovaikutusten soveltamisesta eleohjaukseen VR:ssä ja AR:ssä on Apple Vision Pro. Se on avaruuslaskentalaite, jossa ei ole laitteistokontrollimekanismia. Sen sijaan Vision Pro luottaa silmänseurantaan ja käsieleisiin, jotta käyttäjät voivat manipuloida objekteja virtuaalitilassa edessään.

Lähde: Apple (https://www.apple.com/newsroom/2023/06/introducing-apple-vision-pro/)

Apple Vision Pro sisältää eleitä, kuten napautus, kaksoisnapautus, nipistys ja vetäminen, sekä kahden käden eleitä, kuten zoomaus ja kierto. Nämä eleet liittyvät erilaisiin toimintoihin, kuten objektien valintaan ja manipulointiin, vierittämiseen, ikkunoiden siirtämiseen ja niiden koon säätämiseen.

Ääniohjauslaitteet ja ohjelmistot – miten käyttää niitä liiketoiminnassasi?

Tekoälyn kasvava rooli tarkoittaa, että yhä useammat laitteet ja sovellukset hyödyntävät myös äänikäyttöliittymiä (VUI). Niissä on teknologioita, jotka muuntavat puheen tekstiksi (STT) ja tekstin puheeksi (TTS).

Ääniohjausta käytetään jo hyvin laajasti liiketoiminnassa:

• Asiakaspalvelu – asiakas voi keskustella älykkäiden tuotteiden ja markkinoinnin äänibottien, kuten Inteliwisen (Efecte), kanssa,
• dokumenttien luominen – esimerkiksi Google Docsin ääni kirjoittamisen avulla, joka mahdollistaa käyttäjien diktoida teksti suoraan asiakirjaan,
• kansainvälisten kokousten pitäminen – äänikäyttöliittymä mahdollistaa puheesi kääntämisen reaaliajassa automaattisen kääntäjän avulla, käyttäen Google Translatea Google Meet -keskusteluissa tai käyttämällä erityistä työkalua, kuten Verbum.ai:ta.

Lähde: Verbum.ai (https://verbum.ai/).

Monet ihmiset käyttävät myös ääniohjausta auton ohjelmiston hallintaan, esimerkiksi navigointikohteen asettamiseen ja älylaitteiden ohjaamiseen toimistovalojen säätämiseksi.

Tekoälyvuorovaikutusten tulevaisuus, eli aivo-kone -liittymä

Ideaalinen tapa tekoälyvuorovaikutuksiin laitteiden kanssa olisi luonnollinen, eli täysin näkymätön käyttäjälle. Ja tämä ei ole pelkkää fantasiaa. On jo olemassa prototyyppejä aivo-kone -liittymistä, jotka toimivat käsittämättömillä nopeuksilla, jotka ovat verrattavissa elektroniseen telepatiaan.

Edistyneintä työtä aivo-tietokone -liittymän (BCI) parissa tekee Neuralink. Tämä on yritys, joka kehittää “The Link” -nimistä liittymää, joka on jo kliinisessä testauksessa.

Lähde: Neuralink (https://neuralink.com/)

The Link on kolikon kokoinen siru, joka istutetaan kirurgisesti kallon alle, missä se yhdistyy ohuiden johtojen, niin kutsuttujen neuronilankojen, kanssa, jotka ulottuvat eri osiin aivoja.

Neuronilangoissa on elektrodeja, jotka voivat tallentaa ja stimuloida aivotoimintaa, mikä mahdollistaa neuronisignaalien purkamisen ja koodauksen sekä tiedon lähettämisen ja vastaanottamisen tietokoneelta tai mobiililaitteelta.

The Link istutetaan neurokirurgisella robotilla ja mahdollistaa sitten sovelluksen hallinnan, joka antaa käyttäjän manipuloida näppäimistöä ja hiirtä ajatuksillaan.

Sellaiset tulevaisuuteen suuntautuvat ratkaisut herättävät kuitenkin yhtä paljon toiveita kuin huolia. Toisaalta voi vain ajatella: “Haluan julkaista sosiaalisessa mediassa muistiinpanon yritystapahtumasta, jossa on muotokuva toimitusjohtajasta, joka on otettu kokouksen avajaisissa.” Toisaalta – miten varmistamme, että yhteys ei salakuuntele yksityisiä ajatuksiamme?

Jos pidät sisällöstämme, liity vilkkaaseen mehiläisyhteisöömme Facebookissa, Twitterissä, LinkedInissä, Instagramissa, YouTubessa, Pinterestissä.