Waymo lijkt te testen met het toevoegen van Google’s Gemini-AI-chatbot aan zijn robotaxi’s, met als doel een AI-assistent te integreren die meerijdt met passagiers en hun vragen beantwoordt. Dat blijkt uit bevindingen van onderzoeker Jane Manchun Wong.
“Tijdens het doorspitten van de code van Waymo’s mobiele app ontdekte ik de volledige systeemprompt voor de nog niet uitgebrachte Gemini-integratie,” schreef Wong in een blog. “Het document, intern getiteld ‘Waymo Ride Assistant Meta-Prompt’, is een specificatie van meer dan 1.200 regels die exact beschrijft hoe de AI-assistent zich in een Waymo-voertuig moet gedragen.”
De functie is nog niet uitgerold in publieke versies, maar volgens Wong maakt de systeemprompt duidelijk dat het om “meer dan een simpele chatbot” gaat. De assistent zou vragen kunnen beantwoorden, bepaalde functies in de cabine kunnen beheren — zoals klimaatregeling — en indien nodig passagiers geruststellen.
“Hoewel we vandaag geen details kunnen delen, is ons team voortdurend aan het experimenteren met functies om ritten met Waymo prettig, naadloos en nuttig te maken,” zei Julia Ilina, woordvoerder van Waymo, tegen TechCrunch. “Sommige daarvan kunnen wel of niet onderdeel worden van de ervaring voor onze passagiers.”
Het is niet de eerste keer dat Gemini wordt geïntegreerd in de technologie van het Alphabet-bedrijf. Waymo zegt dat het de ‘wereldkennis’ van Gemini heeft gebruikt om zijn autonome voertuigen te trainen in het navigeren van complexe, zeldzame en risicovolle scenario’s.
Volgens Wong krijgt de assistent een duidelijke identiteit en rol mee: “een vriendelijke en behulpzame AI-metgezel geïntegreerd in een autonoom Waymo-voertuig,” met als primair doel “de ervaring van de passagier te verbeteren door nuttige informatie en ondersteuning te bieden op een veilige, geruststellende en niet-opdringerige manier.” De bot moet duidelijke, eenvoudige taal gebruiken, technisch jargon vermijden en zijn antwoorden kort houden — één tot drie zinnen.
Uit de systeemprompts blijkt dat wanneer een passagier de assistent activeert via het scherm in de auto, Gemini kan kiezen uit een reeks vooraf goedgekeurde begroetingen die zijn gepersonaliseerd met de voornaam van de passagier. Het systeem kan ook contextuele gegevens over de passagier inzien, zoals het aantal Waymo-ritten dat iemand al heeft gemaakt.
De prompts geven Gemini momenteel toegang tot en controle over bepaalde functies in de cabine, zoals temperatuur, verlichting en muziek. Opvallend is dat volumeregeling, routewijzigingen, stoelverstelling en raambediening ontbreken in de lijst met functies, merkte Wong op. Als een passagier vraagt om een functie die Gemini niet kan aansturen, moet de bot reageren met ‘aspirerende formuleringen’, zoals: “Dat is iets wat ik nog niet kan.”
Interessant is dat de assistent expliciet een duidelijk onderscheid moet maken tussen zijn identiteit als Gemini-AI-bot en de autonome rijtechnologie (de Waymo Driver). Bij een vraag als “Hoe zie jij de weg?” mag Gemini dus niet zeggen: “Ik gebruik een combinatie van sensoren,” maar moet hij antwoorden: “De Waymo Driver gebruikt een combinatie van sensoren…”
De systeemprompts bevatten ook diverse opvallende details, zoals hoe de bot moet omgaan met vragen over concurrenten als Tesla of het inmiddels opgeheven Cruise, en welke trefwoorden ervoor zorgen dat hij stopt met praten.
Daarnaast krijgt de assistent de instructie om niet te speculeren over, uitleg te geven bij, te bevestigen, te ontkennen of commentaar te leveren op rijacties in realtime of specifieke rij-incidenten. Als een passagier bijvoorbeeld vraagt naar een video waarin te zien is dat een Waymo ergens tegenaan rijdt, moet de bot het antwoord ontwijken en afleiden.
“Je rol is niet die van woordvoerder voor de prestaties van het rijsysteem, en je mag geen defensieve of verontschuldigende toon aannemen,” staat in de prompt.
De assistent mag wel algemene kennisvragen beantwoorden, zoals over het weer, de hoogte van de Eiffeltoren, hoe laat de lokale Trader Joe’s sluit, of wie de laatste World Series heeft gewonnen. Het is hem niet toegestaan om acties in de echte wereld uit te voeren, zoals eten bestellen, reserveringen maken of noodsituaties afhandelen.
Waymo is niet de enige die AI-assistenten integreert in zelfrijdende voertuigen. Tesla doet iets vergelijkbaars met Grok van xAI. De twee auto-assistenten hebben echter verschillende doelen: Gemini lijkt vooral pragmatisch en rit-gericht te zijn geprogrammeerd, terwijl Grok meer wordt gepositioneerd als een ‘maatje’ in de auto dat lange gesprekken kan voeren en context uit eerdere vragen onthoudt.
0 reacties