Google DeepMind связала модель генерации интерактивных пространств Genie 3 с изображениями Street View. Теперь пользователи могут выбрать точку на карте, задать стиль и описание персонажа, после чего система создаст проходимую AI-среду, старт которой привязан к реальной локации.
Пользователь ставит метку на карте, выбирает визуальный стиль, например Ocean World, Desert Sands, Stone Age или B&W film, и добавляет описание героя. Затем Genie 3 строит интерактивное пространство на базе реальных данных Street View. В Google заявили, что функция использует интерфейс Maps Imagery Grounding, который разработчики уже применяют для создания визуализаций на основе данных Street View.
В демонстрациях компания показала, как технология меняет реальные места: затопленный мост Golden Gate Bridge и Fort Worth Stockyards в Техасе в стилистике 1920-х годов. Ключевой актив Google здесь — архив Street View, который компания собирала годами. В него входят снимки дорог, интерьеров зданий, водных маршрутов и удалённых территорий.
Эта библиотека используется как обучающий материал и как привязка для генеративных пространств. При этом Google продвигает Genie не столько как потребительский продукт, сколько как среду для обучения AI-агентов и роботов, где они могут перемещаться, анализировать ситуацию и получать опыт.
DeepMind уже использует Genie для обучения агента SIMA 2. Waymo, в свою очередь, применяет систему для моделирования реалистичных дорожных сценариев для беспилотных автомобилей. Привязка к Street View позволяет проводить такие симуляции для конкретных реальных мест.
Бывший продакт-менеджер Google по AR/VR и 3D Maps Билавал Сидху опубликовал серию тестовых сценариев, которые показывают работу функции на практике. В его примерах Google Maps-болид Formula 1 едет по Лас-Вегас-Стрип, белка на самокате проезжает мимо Palace of Fine Arts, лодка пересекает озеро Lady Bird Lake в Остине, а прогулка по Белому дому строится на базе интерьерных данных Street View.
Сидху написал: «Теперь можно симулировать реальные места, привязывая Genie 3 к изображениям Street View». Он также добавил, что Google располагает огромным массивом данных о реальных локациях и начинает использовать его на практике.
Показанные примеры демонстрируют широкий диапазон сценариев, но у технологии пока заметны ограничения. В материалах видны мягкие текстуры, нестабильная геометрия и местами сюрреалистичные переходы.
Project Genie с привязкой к Street View начинает глобальный запуск для подписчиков Google AI Ultra по цене 200 долларов в месяц и только для пользователей старше 18 лет. Функция работы с реальными локациями пока доступна лишь для точек в США, но позже Google планирует расширить географию.
В DeepMind называют эту разработку экспериментальным исследовательским прототипом и сообщают, что команда уже работает над улучшенной версией.
Источник: The Decoder, Google DeepMind, публикация Билавала Сидху в X.
