Google анонсировала проект Imagen Video генерация видео по текстовому описанию

0 Коментариев 07 октября 2022

Текстовый запрос - "Счастливый слон в праздничной шляпе идущий под водой".

Google анонсировала проект под названием Imagen Video — нейросеть на базе искусственного интеллекта, способная генерировать видео формата HD по текстовому описанию.

Её новая система под названием Imagen Video создаёт ролики длительностью до 5 секунд по текстовому описанию, причём в довольно высоком качестве. в разрешении 1280 на 768 пикселей. компания пока не публикует исходные коды системы и не открывает доступ к ней, чтобы избежать появления шокирующего или непристойного контента.

При появлении текстового запроса Imagen Video генерирует видеоролики высокой четкости, используя базовую модель генерации видео и последовательность чередующихся пространственных и временных моделей видео с высоким разрешением.

"Мы считаем, что Imagen Video не только способен создавать видеоролики с высокой точностью воспроизведения, но также обладает высокой степенью управляемости и знаниями о мире, включая способность создавать разнообразные видеоролики и текстовые анимации в различных художественных стилях и с пониманием 3D-объектов" - анонсируют на сайте Imagen Video.

Ограничения и отсрочка выпуска

Видео-генеративные модели могут использоваться для позитивного воздействия на общество, например, путем усиления и усиления человеческого творчества. Однако эти генеративные модели также могут использоваться не по назначению, например, для создания поддельного, вызывающего ненависть, откровенного или вредоносного контента. Мы предприняли несколько шагов, чтобы свести к минимуму эти проблемы, например, во внутренних испытаниях мы применяем фильтрацию входных текстовых подсказок и фильтрацию выходного видеоконтента. Тем не менее, остается несколько важных проблем в области безопасности и этики. Imagen Video и его текстовый кодировщик frozen T5-XXL были обучены работе с проблемными данными. Хотя наше внутреннее тестирование показывает, что многое из откровенного и насильственного контента можно отфильтровать, все еще существуют социальные предубеждения и стереотипы, которые сложно обнаружить и отфильтровать. Мы решили не выпускать модель Imagen Video или ее исходный код, пока эти проблемы не будут устранены.