Tencent представила Hunyuan World Model 1.0-Lite для 3D сцен

Tencent выпустила облегченную версию своей модели Hunyuan World Model 1.0 под названием “1.0-Lite”. По данным компании, эта версия работает на обычных потребительских видеокартах, требует примерно на 35% меньше видеопамяти и запускается при объеме памяти менее 17 ГБ. Lite-версия быстрее и экономнее использует ресурсы.

Как и оригинал, 1.0-Lite распространяется с открытым исходным кодом. Доступен демо-режим через sceneTo3D, также файлы есть на GitHub и Hugging Face. Технический отчет опубликован на arxiv.org.

Первая версия, Hunyuan World Model 1.0, также с открытым исходным кодом, создает 3D-сцены по текстовым или графическим запросам. Компания отмечает, что это первый открытый ИИ для стандартных графических систем. Модель совместима с игровыми движками, VR-платформами и средствами симуляции. Такая архитектура позволяет быстро переходить от замысла к 3D-контенту без коммерческих ограничений.

Важная особенность — модель отделяет объекты в сцене, давая пользователям возможность менять положение или редактировать отдельные элементы, например, машины, деревья или мебель. Отдельно выделяется небо, его можно использовать как источник освещения для более реалистичного отображения.

Модель объединяет генерацию панорам и иерархическую 3D-реконструкцию. Поддерживается два типа входных данных: текстовый и графический. Сцены экспортируются в виде меш-файлов, которые легко интегрируются в привычные 3D-процессы.

Модель не создает полностью исследуемые миры, как в современных играх, но позволяет получать интерактивные панорамы. Доступен круговой обзор и ограниченное перемещение камеры. Для сложных движений или длинных видео нужна дополнительная надстройка Voyager, как отмечено в недавней статье исследователей.

Tencent считает эти визуализации шагом в сторону VR-приложений, но модель предназначена и для других видов творчества и взаимодействия. Она точно переводит текстовые описания в виртуальные сцены и поддерживает сжатие для работы в вебе и VR. Архитектура допускает создание сцен разных стилей, пригодных для креативных проектов и дизайна.

Hunyuan World Model 1.0 и 1.0-Lite опубликованы на GitHub и Hugging Face. Интерактивная демо-версия доступна через sceneTo3D, но для входа нужен совместимый с Китаем аккаунт.

Этот релиз — часть стратегии Tencent по развитию и открытию ИИ-проектов. Вместе с Hunyuan World Model 1.0 опубликованы новые инструменты: Hunyuan3D 2.0 для создания 3D моделей с текстурами, HunyuanVideo для AI-видео и языковая модель Hunyuan-A13B с возможностью динамического вывода.

Источник

Читать новости ИИ и технологий в Telegram.


Оцените статью
Gimal-Ai