Эксперт по ИИ назвал 6 нейросетей для генерации видео из текста и изображения
- 29.10.2023
- 1 372
Стремительное развитие нейросетей открывает множество возможностей, в том числе и для генерации видео.
По словам эксперта, уже существуют два основных механизма генерации видео. Первый - на основе изображения, а второй - на основе текстового описания, либо же их комбинации.
При этом более перспективное направление - это генерация видео по текстовому описанию, отмечает Константин Довгий.
Как итог следует выделить 6 нейросетей по созданию видео:
1. Pika Labs - одна из самых продвинутых нейросетей по созданию видео. Делает качественную анимацию. Но есть проблемы, когда нужно учитывать много факторов, заданных в тексте. Генерирует 3-секундные видео.
2. RunwayML - умеет генерировать длинные видео, вплоть до 16 секунд, но есть проблемы с качеством, поскольку очень часто идет хаотичная смена кадров. Также есть проблемы с анимацией персонажей, людей.
3. Genmo - неплохо справляется с генерацией по текстовому описанию, старается учитывать все заданные детали, достойная детализация, но в целом качество на выходе среднее.
4. Morph Studio - умеет учитывать множество деталей, заданных в описании. Неплохое качество видео, но есть серьезные проблемы с анимацией людей - такое ощущение, что нейросеть заточена под создание фильма ужасов, иронизирует Константин Довгий.
5. Kaiber - не умеет делать видео по текстовому описанию, однако справляется с задачей на основе картинки. Имеет смысл использовать, когда нужна просто анимация без чего-то конкретного. Также умеет делать анимацию к музыке, но практически без контроля того, что получится в итоге.
6. Moonvalley - на данный момент самая качественная нейросеть для генерации видео по текстовому описанию. Учитывает множество деталей, позволяя создавать потрясающие видео, максимально приближенные к текстовому описанию.
Также рекомендуем: