Runway представила новую модель Aleph для редактирования видео с помощью ИИ. В отличие от других решений, Aleph позволяет менять уже существующее видео с помощью текстовых подсказок, а не создавать его с нуля. Это должно ускорить пост-продакшн и дать больше контроля режиссерам.
Одна из ключевых функций Aleph — создание новых ракурсов для снятого видео. Например, команда может ввести подсказку “Сгенерируй средний полный план персонажа”, и Aleph создаст дополнительную перспективу. Runway называет это “бесконечным покрытием”.
Aleph также убирает дым и отражения на кадре, добавляет элементы вроде салюта или толпы, меняет окружающую среду — добавляет дождь или изменяет время суток. Освещение при этом подстраивается автоматически.
Модель меняет возраст персонажей, перекрашивает объекты, генерирует эффекты хромакея. Aleph умеет переносить движения из живого видео на статичные изображения.
Модель предназначена для профессиональных режиссеров, которым важно работать с настоящими материалами. Такой подход отражает тенденцию к созданию многофункциональных ИИ-платформ для работы с видео. Например, новая система Google Veo 3 тоже совмещает несколько задач, создавая аудио под готовое видео.
Ранее видеомодели отставали от возможностей ИИ для фото. Aleph показывает, что разрыв сокращается. В мае немецкий стартап Black Forest Labs выпустил модель Flux.1 Kontext для частичного редактирования картинок без генерации с нуля.
Сейчас Aleph доступен только корпоративным клиентам и креативным партнерам Runway, но в будущем сервис обещают открыть для большего числа пользователей. Компания уже сотрудничает с киностудией Lionsgate.
В ближайшее время свои варианты похожих инструментов могут показать Midjourney, OpenAI, MiniMax, ByteDance и Tencent. Преимущество Runway — простое управление и широкий набор функций для монтажа.
