Google представил новый ИИ для генерации видео

Искусственный интеллект под названием Lumiere создает видео из текста либо из изображения. Это не коммерческий продукт, а исследовательский проект для отработки инновационных технологий.

Компания Google представила новый ИИ для создания видео. На текущем этапе он не имеет ограничений, которые накладывают законодательство и общественные нормы на работу генеративных сетей. В основе Lumiere лежит «пространственно-временная архитектура U-net», которая формирует структуру видео сразу на всем его протяжении. Подход отличается от того, что применяют обычно, когда ИИ генерирует начальный и конечный кадры, а потом пытается угадать, чем заполнить пространство между ними. 

Lumiere создает видео длительностью всего в пять секунд. Языковая модель позволяет ему интерпретировать текстовые инструкции пользователей с высокой точностью понимания. Он может анимировать статичные картинки, добавлять или удалять объекты и персонажей из видео, а также угадывать скрытые части изображений. ИИ может скопировать стили или сюжет исходного контента и создать на его основе множество самых разных версий. Об этом сообщает «ТехКульт». 

Увидеть больше работ Lumiere можно на официальном сайте по ссылке

Если ты увидел что-то интересное, выиграл грант или стал очевидцем события, расскажи нам об этом:
Portal072@gmail.com
8 (3452) 68-34-55 /
VK / Telegram

Оцените материал: