Waymo World Model – generatywna symulacja dla autonomicznych taksówek

Autonomiczne samochody Waymo przejechały już blisko 200 mln kilometrów bez udziału kierowcy(?), jednak znacznie większy dystans pokonują w świecie wirtualnym. Firma zaprezentowała Waymo World Model, zaawansowany generatywny model symulacyjny, który ma przygotowywać systemy jazdy autonomicznej na zdarzenia rzadkie, skrajne i trudne do odtworzenia w realnym ruchu drogowym.

Symulacja jako fundament bezpieczeństwa

Dla Waymo symulacja od lat jest jednym z filarów strategii rozwoju bezpiecznej sztucznej inteligencji. Waymo World Model odpowiada za tworzenie hiperrealistycznych środowisk testowych, w których system Waymo Driver może uczyć się reagowania na sytuacje praktycznie niemożliwe do uzyskania na drogach publicznych. Chodzi zarówno o nietypowe zachowania innych uczestników ruchu, jak i o ekstremalne warunki pogodowe czy zjawiska naturalne.

Nowy model oparto na Genie 3, czyli najbardziej zaawansowanym modelu świata ogólnego przeznaczenia opracowanym przez Google DeepMind. Po adaptacji do specyfiki motoryzacji Genie 3 stał się podstawą systemu, który generuje fotorealistyczne i interaktywne środowiska 3D, zsynchronizowane z danymi z kamer oraz lidarów stosowanych w pojazdach Waymo.

Od tornada po słonia na drodze

Jedną z kluczowych zalet Waymo World Model jest wykorzystanie szerokiej wiedzy o świecie, zdobytej podczas wstępnego trenowania na ogromnych zbiorach wideo. Dzięki temu możliwe jest symulowanie zdarzeń, które w rzeczywistości występują skrajnie rzadko. W prezentowanych przykładach znalazły się przejazdy przez zalane przedmieścia, spotkanie z tornadem, pożarem czy jazda w egzotycznym mieście pokrytym śniegiem.

Model radzi sobie także z tzw. długim ogonem obiektów. W wirtualnych scenariuszach pojawiają się słonie, bizony teksańskie, lwy, a nawet pieszy przebrany za dinozaura. Choć brzmi to jak ciekawostka, dla inżynierów kluczowe jest sprawdzenie, czy system poprawnie interpretuje nietypowe kształty i zachowania, zamiast polegać wyłącznie na statystycznie najczęstszych przypadkach.

Kontrola i scenariusze kontrfaktyczne

Waymo World Model oferuje wysoki poziom sterowalności. Inżynierowie mogą narzucać konkretne manewry pojazdu, modyfikować układ drogi, sygnalizację czy zachowanie innych uczestników ruchu. Istotnym elementem są scenariusze kontrfaktyczne, pozwalające sprawdzić, jak samochód zachowałby się przy innej decyzji niż ta podjęta w rzeczywistym przejeździe.

Dodatkowo model reaguje na polecenia językowe, umożliwiając szybkie zmiany pory dnia, pogody lub generowanie całkowicie syntetycznych scen. To znacząco przyspiesza proces testowania i zwiększa jego różnorodność.

Skalowanie i przejście z wideo do symulacji

Waymo rozwija również wydajniejszą wersję modelu, która pozwala na wykonywanie długich sekwencji symulacji przy znacznie niższym zapotrzebowaniu na moc obliczeniową. Ma to kluczowe znaczenie przy testach manewrów trwających wiele minut, takich jak jazda w wąskich ulicach czy w gęstym ruchu miejskim.

Ciekawym zastosowaniem jest konwersja nagrań z kamer samochodowych lub telefonów do pełnej symulacji wielosensorowej. Dzięki temu system może analizować rzeczywiste miejsca, nawet jeśli nie były one wcześniej mapowane przez flotę Waymo.