Стартап разработал систему генерации видео с сохранением визуальной целостности

Стартап разработал систему генерации видео с сохранением визуальной целостности

Американский стартап Runway объявил о запуске новой версии своей модели генерации видео на базе искусственного интеллекта — Gen-4. По словам разработчиков, Gen-4 создает видеоконтент с высокой степенью реалистичности и обеспечивает сохранение визуальной целостности персонажей, объектов и локаций в разных сценах.

Модель использует архитектуры глубокого обучения Swin Transformer V2 и ResNet, а также не требует дополнительной настройки со стороны пользователя.

Пользователи могут загружать изображения и текстовые описания для задания параметров сцены. Система использует визуальные референсы для обеспечения стилистической и сюжетной последовательности.

При этом в отношении Runway продолжается судебное разбирательство: группу художников обеспокоило использование авторского контента при обучении ИИ-моделей. Компания же ссылается на принцип «добросовестного использования» (fair use) в американском праве.