OpenAI працює над інструментом для генерації музики з тексту та аудіо

|
OpenAI працює над інструментом для генерації музики з тексту та аудіо

OpenAI активно розробляє інноваційний інструмент штучного інтелекту, який дозволить створювати музику на основі текстових описів та аудіозаписів. Новий продукт орієнтований на застосування у сфері відео- та вокального супроводу, надаючи користувачам можливість генерувати музичний фон для відео чи створювати акомпанемент для вокальних композицій.

Про це розповідає Finway

Співпраця з Джульярдською школою та підготовка даних

Для підвищення якості майбутнього інструмента OpenAI налагодила співпрацю зі студентами однієї з найпрестижніших музичних академій світу — Джульярдської школи. Майбутні музиканти допомагають компанії анотувати партитури, що дозволяє моделі краще розуміти структуру та композиційні особливості музичних творів.

“Інструмент дасть змогу користувачам додавати музику до вже наявних відео або, наприклад, гітарний акомпанемент до вокальної доріжки”.

Ринок музичного ШІ та конкуренція

Хоча OpenAI вже має досвід у галузі генерації звуку, останнім часом компанія фокусувалася переважно на розвитку моделей синтезу мови. Запуск нового продукту може стати значущим кроком у поверненні компанії до розробки музичних ШІ-рішень. Наразі дата релізу та формат майбутнього інструменту залишаються невизначеними, а також поки що невідомо, чи буде сервіс окремим продуктом, чи інтегрується у вже відомі платформи ChatGPT або відеомодель Sora.

На ринку штучного інтелекту у сфері музики вже діють такі гравці, як Google і стартап Suno. Зокрема, Suno інтегрувала свою модель у Microsoft Copilot, що підкреслює конкуренцію у галузі генерації музики з тексту. На думку експертів, у разі успішного об’єднання текстових та аудіомоделей OpenAI може створити інструмент, здатний скласти серйозну конкуренцію провідним музичним ШІ-платформам та суттєво розширити екосистему продуктів на стику творчості й технологій.

Раніше повідомлялося, що OpenAI також розглядає можливість створення штучного інтелекту для банківської сфери.