Рабочие нейронные сети для создания видео

В этом разделе собраны уже существующие сервисы на основе нейронных сетей. Они предназначены для генерации видеороликов на основе текстовых описаний и готовых медиаматериалов. Такие инструменты имеют свои ограничения и не позволят собирать масштабные анимационные фильмы. Однако помощников можно использовать и на работе, чтобы разнообразить, например, свои презентации или конвертировать текстовые записи в видеоролики для соцсетей.

1. Виспер

Эта услуга от Сбербанка работает уже пару лет и постепенно развивается. Visper — это нейросетевой инструмент для создания презентационных видеороликов с виртуальными персонажами.

Здесь можно настроить внешний вид ведущего, выбрать стиль речи, добавить в видео жесты для расстановки акцентов. Фон также можно настроить — найдите готовый или загрузите свой вариант в виде изображения или видео. В качестве входных данных для видео можно использовать текст или готовую презентацию в формате PDF.

Вы можете создавать бесплатные ежемесячные видеоролики продолжительностью 2 минуты и с водяным знаком. Подписка за 1490 рублей в месяц позволяет генерировать видео до 20 минут. Также есть вариант с оплатой 90 рублей за минуту, если не хотите оформлять постоянный тариф.

Попробуйте Visper →

2. Синтез

Synthesia — еще один сервис виртуальных персонажей, который может генерировать видеоконтент на основе текста. Для озвучки предлагается выбрать варианты из списка готовых аватарок. Выглядят они достаточно реалистично, их синтетический характер по сравнению с живыми динамиками все же заметен, но это не отвлекает от просмотра.

Здесь нет бесплатного режима. Персональная подписка за 30 долларов дает вам доступ к десяткам аватаров и шаблонов, сотням языков озвучивания и многому другому. Для работы с крупными проектами существует тариф «Корпоративный». Включает в себя дополнительные аватарки, шаблоны с брендом пользователя и множество дополнительных сервисов для подготовки качественных роликов.

Попробуйте Синтезию →

3. Designs.ai

Нейросеть Designs.ai позволяет создавать не только видеоролики, но и баннеры, логотипы, оформление постов в социальных сетях, озвучку и текст. С помощью сервиса можно будет генерировать контент, который можно настроить под свои нужды с помощью текстовых запросов. Источником может быть что угодно: краткое описание, длинный сценарий или статья.

Для социальных сетей готовые видеоролики можно настроить под конкретные форматы каждого приложения. Это полезно для личной страницы и рекламных кампаний. Базовая подписка стоит 29 долларов в месяц, а для более крупных проектов есть план Pro за 69 долларов в месяц. В последнем случае пользователи могут создавать больше элементов контента, а также загружать черновики проектов и экспортировать раскадровки в формате PDF.

Попробуйте Designs.ai →

4. Флики

Fliki поможет вам превратить сценарии, статьи и посты в блогах в видеоролики. Визуальную часть можно дополнить автоматической озвучкой реалистичными голосами. В нем также поддерживается русский язык.

В проекте можно редактировать каждый элемент, изначально сгенерированный нейросетью: настроить фон, выбрать стоковые изображения, видео и музыку, добавить текстовые подписи. Бесплатный план позволяет создавать видео продолжительностью до 5 минут в разрешении 720p. На платном плане за 28 долларов в месяц вы можете создавать до 180 минут видео в формате Full-HD.

Попробуйте Флики →

5. Люмен5

Lumen5 похож на предыдущий сервис по своим возможностям. Здесь нейронная сеть также используется для генерации видео на основе текста. Вы можете добавить вводную информацию вручную или просто вставить ссылку на статью в Интернете. Сервис автоматически собирает проект со стоковыми материалами и подписями пользователей.

Для дизайна можно выбрать готовые шаблоны, а затем доработать отдельные элементы. Если предложения нейросети кажутся вам не очень удачными, то стоит поискать картинки, видео, иконки, музыку и визуальные эффекты вручную.

Служба тестирования предлагает бесплатный режим, в котором вы можете экспортировать видео с водяным знаком и в разрешении 720p. Базовая подписка за 19 долларов в месяц удаляет метку Lumen5, но качество файлов остается прежним. Чтобы получить доступ ко всем функциям, вам необходимо использовать план Starter за 79 долларов в месяц или план Professional за 199 долларов в месяц.

Попробуйте Люмен5 →

6. Изображение

Pictory может стать альтернативой предыдущим сервисам. Он также генерирует видеоролики со стоковыми кадрами и подписями на основе сценариев или кратких описаний.

В Pictory можно создавать не только видео, но и изображения и GIF-анимацию. Инструмент лучше всего подходит для дизайнеров, маркетологов и SMM-специалистов.

На бесплатном плане вы можете создать три видео в качестве теста. За 23 доллара в месяц вы можете снять до 30 видеороликов. Также с подпиской доступна озвучка текстов, большой выбор фоновой музыки и возможность сохранять собственные шаблоны для проектов.

Попробуйте картинку →

Экспериментальные проекты по созданию видеороликов

Эти системы пока недоступны широкой аудитории, разработчики тестируют их за закрытыми дверями. Но они могут дать вам представление о том, какие функции скоро появятся в видеоредакторах для любителей и профессионалов.

1. Подиум Gen-2

Runway разрабатывает модификацию нейросети Stable Diffusion с поддержкой языковой модели Gen-2. Эта система позволяет создавать новые видео только по текстовому описанию, на основе изображений или из готовых постов.

С помощью этой системы в будущем можно будет создавать художественные фильмы, анимацию, видеоролики для социальных сетей, обучающие материалы. Тестирование системы продолжается, вы уже можете отправить запрос на доступ в закрытом режиме. Для широкого круга пользователей Gen-2, скорее всего, откроется уже в 2023 году.

Узнать о Gen-2 →

2. Видео с изображением

Imagen Video — одна из нейронных сетей Google. Система способна создавать видео в разрешении до 1280×768 пикселей с частотой 24 кадра в секунду на основе текстового описания. ИИ работает на основе диффузионной модели. Исходные изображения сначала размываются, а затем система запоминает и восстанавливает эти кадры по шуму. Imagen Video также включает методы повышения разрешения и качества выводимого видео.

Узнайте больше об Imagen Video →

3. Фенаки

Еще одна модель от Google. Он способен создавать более реалистичные и точные видеоролики по запросу, но пока не может делать это в высоком разрешении. Разработчики рассматривают возможность использования Phenaki в сочетании с Imagen Video в качестве идеального инструмента. На данный момент нет информации о том, когда нейросеть будет выпущена в открытый доступ для тестирования.

Узнать о Фенаки →

4. Дримикс

Dreamix также разработан специалистами Google Research. Нейросеть может редактировать готовые ролики по текстовому запросу, добавляя новые элементы или полностью их перерисовывая. Лучше всего подходит для анимации неподвижных изображений или замены объектов в кадре. Пока алгоритм работает только в низком качестве с низким разрешением.

Узнать о Dreamix →