Нейросети для видео в этом году значительно продвинулись. Представлены пять лучших и наиболее стабильных вариантов с указанием их сильных и слабых сторон, а также возможностей сообщества пользователей. Все нейросети предлагают платные и бесплатные тарифы.
LTX Studio: Генерация целых фильмов по сценарию
LTX Studio — мощная нейросеть, ранее доступная только в альфа-версии. Теперь каждый может бесплатно создавать видео после регистрации. Её уникальность — генерация целых фильмов из многокадровых эпизодов по промту или загруженному сценарию. Регистрация стандартная (через Google). Работа возможна как с готовым сценарием (например, из ChatGPT), так и с исходной идеей. Хотя нейросеть лучше работает с английским языком, можно использовать переводчик. Даже при вводе промпта на русском, история генерируется на английском.
Процесс генерации: создание истории, выбор стиля (например, комикс), добавление персонажей с настройкой внешнего вида (загрузка фотографий лиц, описание одежды и т.д.). После нажатия кнопки «Старт» генерируется раскадровка с описанием каждой сцены (4–10 кадров в сцене). Каждый кадр можно редактировать, заменять или добавлять.
Ключевые возможности: генерация раскадровки, редактирование кадров, озвучка, экспорт в XML, генерация видео, создание презентации проекта (с названием, синопсисом, описанием персонажей, мудбордом, цветовой палитрой и описанием каждой сцены, экспортируется в отдельную папку), управление камерой, изменение стиля видео (путем загрузки новых изображений для перерисовки персонажей и фона).
Тарифы: Доступен бесплатный тариф с ограниченными возможностями.
Runway: Стабильная нейросеть с широким функционалом
Runway — известная и стабильная нейросеть с постоянно обновляющимся функционалом и активным сообществом. Предлагает инструменты для работы с видео: синхронизацию губ, генерацию видео из текста и картинок, расширение картинок, удаление объектов и многое другое.
Генерация видео: Runway позволяет генерировать видео на основе текстовых промтов и картинок. При использовании картинки, нейросеть создаёт анимацию. Качество зависит от количества итераций и уточнения промта. Бесплатный тариф предоставляет доступ к модели Gen3 Alpha Turbo, но может быть ограничен из-за нагрузки на серверы.
Удаление объектов: Инструмент для удаления объектов с видео с помощью выделения нужной области кистью.
Lum (ранее Dream): Оживление картинок без промтов
Lum (ранее Dream) — нейросеть для оживления картинок, даже без текстовых промтов. Генерирует видео на основе первого и последнего кадров, автоматически добавляя промежуточные. Качество зависит от исходного изображения (возможны артефакты, устранимые многократной генерацией).
Creato: Креативный подход и улучшение качества видео
Creato менее сильна в реалистичной генерации, но excels в креативности. Встроена функция улучшения качества видео (upscale), эффективно работающая вместе с мощным генератором картинок.
Генерация видео: Видео генерируется на основе последовательности картинок с плавными переходами, идеально подходящими для музыкальных клипов или коротких анимационных роликов.
Klin: Китайская нейросеть для генерации по тексту
Klin — популярная китайская нейросеть, генерирующая реалистичные видео на основе текстовых описаний. Хотя она может работать с картинками, её преимущество — генерация по тексту. Бесплатный пробный период позволяет оценить её возможности.
Генерация видео: Klin хорошо генерирует видео с реальными объектами, демонстрируя неплохие результаты в создании движения и анимации по текстовому промту. Генерация с картинок даёт более спорные результаты.
Шта: Новая нейросеть с бесплатными генерациями
Новая нейросеть, недавно вышедшая и предлагающая бесплатные генерации.
Выбор нейросети зависит от ваших задач и предпочтений. Все представленные варианты имеют свои преимущества и недостатки. Лучший способ выбрать подходящий инструмент — попробовать каждый и оценить результаты.