Waymo создала модель виртуального мира для беспилотников. Она основана на технологии Genie 3 от Google. Модель генерирует гиперреалистичные сцены.
Искусственный интеллект тренируется на редких ситуациях. Например, на снегу на мосту Золотые Ворота. Такое в реальности почти не случается.
Раньше учили только на реальных данных. Опасные события в них почти не встречались. Теперь можно смоделировать что угодно.
Инженеры задают простые текстовые запросы. Модель создаёт подходящую симуляцию. Получается видео и данные лидара одновременно.
Genie 3 помнит детали несколько минут. Раньше контекст терялся мгновенно. Это большой шаг вперёд.
Waymo не просто вставила в модель видеозаписи. Прошла специализированное обучение. Теперь модель выдаёт и 2D-видео, и 3D-карты лидара.
Лидар добавляет информацию о глубине. Камеры её не дают. Это критически важно для машинного зрения.
Модель может «мутировать» реальные сцены. Можно изменить погоду или маршрут. И посмотреть, что будет.
Так проверяют решения искусственного интеллекта. Симуляция получается реалистичнее старых методов. Консистентность тоже выше.