Våre fremtidige smarte biler vil være innebygde digitale assistenter

Lei Zhang leder det globale Digital Cockpit-teamet for NIO i Silicon Valley. Teamet er ansvarlig for hele den digitale cockpit-opplevelsen du får i en NIO. Lei har over ti års erfaring i teknologiindustrien og spesialiserer seg i Android, innebygd Linux, bilindustrien IWI, mobilapplikasjoner og webtjenester. Tidligere var Lei VP programvare og sjefsarkitekt, for Huami Corp. og Tech Lead Manager i Google. Han har en mastergrad i datateknikk fra Peking University.

Det pågår en stor debatt om hvordan digitale assistenter, som vår NOMI, kan muliggjøre fremtidige innovasjoner for elektriske biler, og etter hvert også fullstendig autonome biler. Vi ønsker denne debatten velkommen, da den hjelper oss med å definere hva en “smart bil” vil være for deg som bruker den.

Du er kanskje kjent med digitale assistenter allerede. Siri fra Apple, Amazon Alexa og Google Home er alle praktiske. De kan hjelpe deg i hjemmet, styre lyset ditt, slå av og på musikken, overvåke huset når du ikke er hjemme og redusere energibruken hjemme hos deg. Når det kommer til digitale assistenter i en bil, er saken litt annerledes. En digital assistent i en bil skal dekke alle behovene nevnt over, og flere til. Som sjåfør, trenger du en digital assistent som bidrar til raske avgjørelser om navigasjonsruter, lading og lademuligheter, vedlikehold og omfattende sikkerhetsbeskyttelse.

Når autonome biler blir omgjort til mobile boarealer, ser vi for oss at digitale assistenter vil utvikle seg enda mer. Etter hvert vil bilen hjelpe deg med å kunne utnytte kjøretøyet ditt og og tjenestene som tilbys på en enda bedre måte. Vi har allerede begynt på denne veien mot en mer innbydende opplevelse for sjåfører og passasjerer. NIOs innebygde digitale assistent, kalt NOMI, lyser opp bilens eksteriør når data-synssystemet gjenkjenner folk som nærmer seg det. NOMI justerer også luftventilene, sitteplasser og speilinnstillinger i kupeen basert på hver brukeres unike preferanser.

NOMI kan lyse opp den mørke berøringsskjermen når den merker at noen prøver å snakke med henne. Over tid vil NOMIs maskinlæringsalgoritmer bli bedre og bedre, og hver brukeres kjøreopplevelse vil forbedres ved at NOMI kan forutse dine ønsker og handlinger. Når du snakker med NOMI, skal du føle at du snakker direkte med bilen.

I dag tilbyr noen OEM-er et stemmegjenkjenningsgrensesnitt i sine elektriske biler, men det er designet mer som en passiv interaksjon for deg som sjøfør. Du kan legge inn destinasjoner eller spille bestemte sanger. Vi mener at denne funksjonen må videreutvikles for å bli en aktive følgesvenn i den digitale cockpiten. Andre konkurrenter i Kina erkjenner at dette vil være fremtiden for alle bilprodusenter.

Likevel er NOMI ikke bare en digital stemmeassistent - det er en smart følgesvenn som kan forstå brukerens mønstre i det mobile boarealet. Dette gjennombruddet er basert på komplekse kunstige intelligensteknologier som lærer å forutse hva en bruker ønsker over tid, samtidig som brukerens følelse av kontroll, komfort og sikkerhet forbedres. Noen jobber aggressivt for å levere taleinteraksjoner som muliggjør naturlige samtaler mellom brukeren og bilens stemmeassistent, omtrent som NOMI.

Bygg den digitale følgesvenn

I dag integrerer NIO NOMI med et kobbel av innvendige kameraer og sensorer slik at hun kan forstå hva en bruker sier og oppfatter brukerens plassering i bilen - enten i førersetet, passasjersetet eller baksetet. Videre er NOMI designet for å bare svare kun den spesifikke personen som startet samtalen, i det vi kaller den “multimodale lydsonen." Disse lydsonesamtalene er isolert sånn at NOMI skal kunne snakke direkte med brukeren som startet samtalen. Stemmemotoren er smart nok til ikke å bli avbrutt eller forvirret av andre passasjerer som snakker i bakgrunnen eller av et spedbarn som gråter i babysetet.

NOMI vil øyeblikkelig vite hvem brukeren er, basert på ansikts- og bildegjenkjenningsteknologier. NOMI vil kunne oppdage noens identitet og til og med hva slags stemning eller følelser de føler. For eksempel kan NOMIs kameraer gjenkjenne om brukeren er sliten etter en lang arbeidsdag. I tillegg til å koordinere viktige funksjoner som å navigere i bilen hjemme, kan NOMI også spille litt avslappende musikk og starte en uformell, munter samtale med brukeren, og til og med dele noen kornete, personlige vitser for å lette stemningen.

Selvfølgelig vil også NOMI gjenkjenne om hun snakker med et barn eller en voksen. Uansett vil hun skreddersy svarene for å være forståelig for forskjellige målgrupper. For eksempel kan NOMI bli en historieforteller for å engasjere et kjedelig barns oppmerksomhet. Eller hva med noen pedagogiske spill i baksetet? Vi har tatt dette konseptet med den "digitale barnepiken" enda lenger for å beskytte barn eller kjæledyr. Hvis du ved et uhell setter igjen et barn eller et dyr alene i bilen på en varm dag, vil NOMI øyeblikkelig sende et varsel til brukeren. I tillegg vil hun kunne aktivere klimaanlegget eller ta ned vinduene for å kjøle ned bilen fram til eieren kommer tilbake.

Den digitale assistenten om bord vil utvikle seg til å bli mye mer enn en en digital assistent. Mer enn en bekvemmelighet. Den digitale assistenten i bilen din, vil bli en følgesvenn som du er avhengige av for å oppfylle dine økte forventninger i den kommende tiden med autonom kjøring.

Som opprinnelig publisert på AutoTech Outlook.