ПОПУЛЯРНЫЕ НОВОСТИ




Нейросети научились генерировать анимацию по фотографии и речи человека

Нейронные сети  •  16-03-2024, 12:17
Соколов Станислав
журналист Pogovorim.by

Китайцы из Alibaba Group сделали настоящий прорыв в создании эмоциональных портретных видео. Подробнее о новинке 16 марта рассказал нейроблогер Youtube-канала Salladorn AI Константин Довгий.

 

Нейросети научились генерировать анимацию по фотографии и речи человека

 

Для генерации достаточно фотографии человека и аудио с речью или песней, после чего нейросеть сгенерируют естественную анимацию с передачей эмоций, неотличимую от реальной.

 

Emote Portrait Alive — создание выразительных портретных видео с помощью модели диффузии Audio2Video в слабых условиях. У нейросети пока нет конкретного названия, она находится в бете-тестировании и пока недоступна для использования.

 

Персонаж: Audrey Kathleen Hepburn-Ruston

Источник вокала: Ed Sheeran - Perfect. Covered by Samantha Harvey

Более подробно ознакомиться можно вот в этом видео:

 

 

Также рекомендуем

 

Читайте нас в