DiffRhythm

Андрей Ракитин

ML-инженер и автор блога

Сфера:

Генерация песен

Задача:

Озвучить песню

Придумать текст песни

Тип преобразования:

Текст в Аудио

Условия использования:

Бесплатные

Попробовать

DiffRhythm — бесплатный генератор песен с помощью ИИ. Доступны различные режимы работы: создание текста песни, расстановка таймкодов и озвучка текста. Можно использовать аудио от 10 секунд в качестве референса. ИИ пишет текст длиной до 3 минут, а длина озвученного трека составляет 95 секунд. Доступен экспорт в wav, mp3 и ogg.

Особенности DiffRhythm:

Напишет текст песни. DiffRhythm позволит почувствовать себя настоящим сонграйтером. С помощью ИИ можно написать текст песни, не обладая творческим мышлением и знанием музыкальной теории. К сожалению, генерация трека доступна только на английском и китайском языках. Стоит отметить, что ИИ пишет текст песен с учетом рифмы.
Расставит таймкоды. У вас есть текст песни, но нет временных меток? На основе текста трека ИИ расставит таймкоды с учетом длины куплетов и особенностей языка.
Споет песню. Если у вас есть готовый текст песни с таймкодами, то можно приступать к генерации трека. Итоговая длина песни, созданной с помощью ИИ, не превышает 95 секунд.

Как сгенерировать песню с помощью ИИ:

Создание текста. Если у вас уже есть текст с таймкодами, то переходите ко второму пункту. Во вкладке «LLM Generate LRC» выберите пункт «Method 1: Generate from Theme». Укажите тематику на английском языке, например: «Love and Heartbreak». Далее введите теги. Хорошей практикой считается указание жанра песни в качестве тегов: «vocal emotional piano pop». Выберите язык и запускайте генерацию. В результате ИИ напишет текст песни с временными метками. В среднем, генерируется текст длиной 3 минуты.
Озвучка песни. Добавьте текст песни с таймкодами в специальное поле. Каждая строка должна иметь формат: [mm:ss.xx]Текст, где mm — минуты, ss — секунды, xx — сотые доли секунды. Вы можете посмотреть образец на этой же странице. Кроме того, доступно добавление эталонной композиции, на которую должна быть похожа сгенерированная песня. Желательно использовать эталонные композиции длиной не менее 10 секунд. Запустите генерацию, а ИИ создаст песню по вашему тексту.
Экспорт. После завершения работы ИИ-генератора песен вы можете загрузить трек в выбранном формате. Доступны следующие форматы: wav, mp3, ogg.

Похожие нейросети

songR

songR - нейросеть, способная придумать песню и спеть. Приложение создаст оригинальный текст всего из нескольких ключевых слов. К сожалению, нейросеть придумывает песни и поёт только на английском языке. Предоставлены 3 голоса (два женских и один мужской) и возможность экспорта в виде .mp3 или .mp4.

Riffusion

Riffusion - абсолютно бесплатная нейросеть, поющая песни красивым голосом. Сервис принимает только английский текст не более 4-20 слов, но весьма быстро генерирует достаточно качественные и разнообразные результаты. После озвучки песни нейросетью вы можете экспортировать её в форматах аудио (mp3) или видео (mp4).

Suno AI

Suno AI - нейросеть, способная написать текст песни и озвучить её красивым голосом. Искусственный интеллект умеет генерировать текст песен и петь на огромном количестве языков. После создания песни с помощью нейросети вы можете экспортировать её в формате аудио или видео (текст на фоне картинки), а также поделиться ссылкой.

Udio

Udio - нейросеть для создания песен. Сервис генерирует композиции высокого качества на основе простых текстовых инструкций, учитывая жанр и тему. Особого внимания заслуживает возможность дальнейшего редактирования песен, включая функции для профессионалов и новичков музыкальной индустрии. Нейросеть умеет создавать песни на разных языках.