Gemini i bilen: Google tester en assistent som ser fremover

Google har vist en eksperimentell Gemini-funksjon for biler: assistenten kan midlertidig få tilgang til et eksternt bilkamera og svare på spørsmål om det som befinner seg foran føreren. Muligheten ble demonstrert av Android-president Sameer Samat i en samtale med Logan Kilpatrick, lederen for Google AI Studio.

Demoen foregikk i en Volvo EX60, en modell som ennå ikke er kommet i salg. Bilen kjører Google built-in med Gemini og ser, ut fra visningen, foreløpig ut til å være det eneste kjøretøyet der dette scenariet er tilgjengelig. Google har ikke sagt når teknologien kommer til andre modeller, eller om den kommer i det hele tatt.

Ideen minner om kameramodusen i Gemini Live på Android-telefoner, bare at bilkameraet blir assistentens øyne i stedet for mobilen. Brukeren kan spørre Gemini om en bygning, et objekt eller et skilt foran bilen, og systemet behandler bildet før det svarer med stemmen. Samat understreket også at Gemini ikke analyserer veien kontinuerlig: kameraet kobles inn først etter en tydelig henvendelse til assistenten og et konkret spørsmål, og tilgangen slås deretter av igjen.

Under demonstrasjonen gjenkjente Gemini objekter rundt Googles campus i Mountain View. Assistenten identifiserte lokale landemerker, blant annet kunstinstallasjonen The Orb, beskrev detaljer ved soltaket Gradient Canopy og fortalte om den arkitektoniske historien til Shoreline Amphitheatre. Systemet var ikke øyeblikkelig: det var en merkbar pause før kameraet ble koblet til, og bilskjermen viste ingen søker slik Gemini Live gjør på en smarttelefon.

Google omtaler fortsatt funksjonen som eksperimentell og leter etter de beste bruksområdene i virkelige kjøreturer. Ett eksempel er å oversette og forklare trafikkskilt på et fremmed språk under reiser. Hvis teknologien får en bred lansering, kan Gemini i bilen svare ikke bare ved hjelp av kart og navigasjon, men også med kontekst fra det bilen faktisk ser foran seg. Det opprinnelige materialet oppga ingen priser.