DreamTalk — нейросеть, заставляющая фото говорить. Приложение представлено на платформе Hugging Face. Важной особенностью нейросети является её способность синхронизировать мимику с текстом аудиозаписи на многих языках. Также доступен выбор эмоций. Можно заставить говорить не только фотографии, но и картинки, статуи и т.д.
Особенности DreamTalk:
- Говорящее фото. Заставьте разговаривать фотографии людей, картинки с героями мультфильмов и даже статуи. Для использования DreamTalk требуется лишь загрузить изображение хорошего качества, большую часть которого занимает лицо. Затем добавьте аудио, и нейросеть заставит фотографию говорить. Чем больше загруженная аудиозапись, тем дольше генерация видео. Результат можно экспортировать в формате .mp4.
- Выбор эмоций. DreamTalk не только заставит картинку говорить с помощью нейросети, но и позволяет выбирать эмоции. Вам доступные такие эмоции, как счастья, радость, удивление, нейтральные, грусть и другие. Обратите внимание, что выбор эмоции влияет только на мимику и не изменяет исходную аудиозапись.
- API. Нейросеть размещена на платформе Hugging Face. Следовательно, вы можете подключаться к ней с помощью API. Условия использования API читайте в правилах платформы.
Нейросеть заставит картинку говорить абсолютно бесплатно.