OpenAI активно работает над созданием инновационного инструмента для генерации музыки, который сможет создавать композиции на основе текстовых и аудиоподсказок. Об этом стало известно из сообщения в The Information.
Об этом сообщает ProIT
Возможности нового музыкального инструмента OpenAI
Предполагается, что этот продукт можно будет использовать для добавления музыки к уже существующим видео или, например, для создания гитарного аккомпанемента к имеющейся вокальной дорожке. Пока что неизвестно, когда OpenAI планирует представить новый продукт и будет ли он отдельным сервисом или станет частью уже известных платформ компании, таких как ChatGPT или видеоприложение Sora.
Использование учебных данных и аналоги на рынке
По данным источников, OpenAI сотрудничает с отдельными студентами из Джульярдской школы искусств, которые помогают аннотировать музыкальные партитуры для формирования качественного учебного набора данных.
Компания уже имеет опыт в разработке генеративных музыкальных моделей, которые появились еще до запуска ChatGPT. В последние годы OpenAI сосредоточила внимание на аудиомоделях, ориентированных на преобразование текста в речь и обратный процесс. Среди других компаний, которые создают подобные музыкальные генераторы, выделяются Google и Suno.
OpenAI работает над новым инструментом, который будет генерировать музыку на основе текстовых и аудиоподсказок, согласно сообщению в The Information.