Китайская ByteDance, владелец TikTok, представила приложение Ripple для создания и редактирования музыки с помощью искусственного интеллекта. Оно позволяет создавать песни в разных жанрах на основе мелодии, которую напевает пользователь.
Приложение заработало только в США, и компания тестирует его в закрытой бета-среде. Ripple доступен только по приглашению, и у ByteDance пока нет планов по его дальнейшему развёртыванию. Запросить приглашение можно на сайте Ripple.club, где есть ссылка для загрузки приложения на iOS.
ByteDance заявляет, что Ripple поможет создателям контента, которым станет проще добавлять собственные саундтреки к коротким видео для TikTok и других платформ.
В Ripple достаточно напеть мелодию в микрофон телефона. Затем алгоритм генерирует инструментальные партии (барабаны, бас и фортепиано). Продолжительность песни будет соответствовать длине входной голосовой записи. Кроме того, Ripple может генерировать только инструментальную музыку без вокала.
Модель обучали на мелодиях, права на которые имеет сама ByteDance, а также на музыке, лицензированной для использования компанией. IT-гигант заявил, что уважает права артистов и партнёров-правообладателей.
В 2022 году разработчики в рамках проекта Riffusion представили вариант системы машинного обучения Stable Diffusion для генерации музыки вместо изображений. Мелодии можно создавать как на основе предложенного шаблона, так и с помощью текстового описания на естественном языке.
Источник новости: habr.com
