Google integreert Gemini verder in Android Automotive

Google heeft een experimentele Gemini-functie voor Android Automotive gedemonstreerd waarmee de AI vragen kan beantwoorden over de omgeving buiten het voertuig. Hiervoor krijgt Gemini, op verzoek van de bestuurder, tijdelijk toegang tot de frontcamera van de auto. Android-ecosysteemchef Sameer Samat demonstreerde de functie tijdens de Google-ontwikkelaarsreeks Release Notes, samen met Logan Kilpatrick, productmanager van Google AI Studio.

Google demonstreerde de functie in een Volvo EX60, een (nog niet leverbare) SUV die draait op Android Automotive en Gemini als AI-assistent gebruikt. Na bijvoorbeeld het spraakcommando “Hey Google, wat zie je om ons heen?” krijgt Gemini tijdelijk toegang tot de frontcamera. De AI analyseert vervolgens de omgeving en beantwoordt vragen over objecten die in beeld zijn.

Volgens Android-ecosysteemchef Sameer Samat is de cameratoegang strikt tijdelijk. Gemini ontvangt alleen beelden nadat de bestuurder de functie heeft geactiveerd en een vraag heeft gesteld. Zodra het antwoord is gegeven, wordt de toegang automatisch weer ingetrokken.

In de video hieronder laat Google zien hoe Gemini vragen beantwoordt over objecten die tijdens het rijden in beeld komen. Tijdens een rit door Mountain View vraagt Android-ecosysteemchef Sameer Samat bijvoorbeeld naar een sculptuur langs de weg en het gebouw daarachter. Gemini identificeert het kunstwerk en geeft vervolgens aanvullende informatie over het materiaal, de achtergrond en het gebouw.

De functie lijkt sterk op de cameramodus van Gemini Live op Android-smartphones. Het verschil is dat niet de smartphonecamera, maar de frontcamera van de auto als invoer dient. Volgens Samat onderzoekt Google daarmee wat mogelijk is wanneer Gemini, met toestemming van de gebruiker, dezelfde omgeving kan waarnemen als de bestuurder tijdens het rijden.

Google is niet de eerste die AI koppelt aan de buitencamera’s van een auto. BMW presenteerde in 2019 al het concept BMW Natural Interaction, waarmee bestuurders via spraak en gebaren vragen zouden kunnen stellen over objecten in de omgeving. Hoewel het concept destijds werd getoond, heeft BMW deze functionaliteit nooit in productie gebracht.

Of de experimentele Gemini-functie uiteindelijk ook beschikbaar komt in productievoertuigen, heeft Google nog niet bekendgemaakt. Volgens het bedrijf wordt nog onderzocht hoe de technologie het best kan worden geïntegreerd en welke toepassingen in de praktijk daadwerkelijk meerwaarde bieden.

Volgens Samat werkt Google nog aan de beste manier om de functie in auto’s te integreren en onderzoekt het bedrijf welke toepassingen daadwerkelijk nuttig zijn in het dagelijkse verkeer. Als voorbeeld noemt hij het automatisch vertalen van verkeersborden in een vreemde taal tijdens het rijden.

Tijdens Google I/O 2026 kondigde Google al verschillende nieuwe AI-functies voor Android Automotive aan, waarvan een deel eveneens gebruikmaakt van de frontcamera. Zo moet Gemini straks ook voertuigspecifieke vragen kunnen beantwoorden, bijvoorbeeld over de betekenis van een waarschuwingslampje op het dashboard of de vraag of een televisie die je wilt vervoeren in de bagageruimte past.

Daarnaast breidt Google de immersieve navigatie in Google Maps uit met een live-rijstrookassistent voor compatibele voertuigen. Die analyseert via de frontcamera de rijbaan, bepaalt op welke rijstrook de auto zich bevindt en geeft in realtime aanwijzingen wanneer de bestuurder van rijstrook moet wisselen of een afslag moet nemen.

Google is van plan deze nieuwe functies later dit jaar beschikbaar te stellen.