Google araştırmacılar bir tane yarattı AI metin girişinden müzik parçaları üretebilir – buna benzer ChatGPT bir metin komutunu bir hikayeye dönüştürebilir ve DALL-E yazılı bilgi istemlerinin görüntülerini oluşturur. AI programı, metin girişini saniyeler ve hatta dakikalarca müziğe dönüştürebilir ve uğultulu melodileri başka enstrümanlara dönüştürebilir.
tarihinde yayınlanan araştırmaya göre GithubAI modeli denir MüzikLMve şirket, modeli kullanarak ürettiği bir dizi örnek yükledi. Örneklere MusicCaps adı verilir ve aslında insan uzmanlar tarafından sağlanan kapsamlı metin açıklamalarıyla birlikte 5,5 bin müzik-söz çiftinden oluşan bir veri kümesidir.
“‘Bozulmuş bir gitar riffiyle desteklenen sakinleştirici bir keman melodisi’ gibi metin açıklamalarına dayalı olarak hi-fi müzik üreten bir model olan MusicLM’i tanıtıyoruz. MusicLM, koşullu müzik oluşturma sürecini hiyerarşik bir diziden diziye modelleme görevi olarak yayınlar ve birkaç dakika boyunca tutarlı kalan 24 kHz’de müzik üretir” dedi.
Google’ın yapay zekası 5 dakikalık melodiler oluşturur
Örnekler arasında 30 saniyelik klipler ve kulağa gerçek şarkılar gibi gelen 5 dakikalık uzun müzik yer alır. Paragraf uzunluğundaki açıklamalarla oluşturulurlar ve talimatlar ne kadar net olursa müzik o kadar iyi olur. Ayrıca, örnekler aynı zamanda tür, atmosfer ve hatta belirli enstrümanlar içerir.
“Ses, bir dizi metin istemi göndererek oluşturulur. Bunlar, modelin önceki başlıktan türetilen semantik belirteçleri nasıl sürdürdüğünü etkiliyor” dedi araştırmacılar.
Hikaye modu
Ayrıca, modele temel olarak her müzik türünün oluşturulması için bir süre ile birden çok metin girişi verildiği bir “hikaye modu” demosu da vardır.
Örneğin bu istemi alın:
meditasyon zamanı (0:00-0:15)
uyanma zamanı (0:15-0:30)
çalışma zamanı (0:30-0:45)
%100 verme zamanı (0:45-0:60)
“Deneylerimiz, MusicLM’nin hem ses kalitesi hem de metin açıklaması uyumluluğu açısından önceki sistemlerden daha iyi performans gösterdiğini gösteriyor. Buna ek olarak, MusicLM’nin hem metne hem de melodiye koşullandırılabileceğini, ıslıklı ve uğultulu melodileri bir metin başlığında açıklanan stile göre dönüştürebileceğini gösteriyoruz.”