Cum să faci muzică AI cu MusicGen de la Meta

Meta a lansat codul pentru MusicGen, un alt generator de muzică AI care poate transforma descrierile de text în melodii muzicale. Demo-ul poate fi găsit online și aveți nevoie doar de un browser pentru a o încerca. Rezultatele nu sunt rele, dar mai mult decât atât, demonstrează cât de departe au progresat modelele muzicale AI.

Iată ce trebuie să știți despre MusicGen și cum să generați muzică.

Ce este MusicGen?

În iunie 2023, Meta a lansat modelul său de generație muzicală AI numit MusicGen. Nu este prima companie care abordează problema complexă a sintetizării muzicii brute dintr-o simplă descriere text; pana acum poti creați muzică cu Jukebox-ul OpenAI sau generați fragmente de cântec cu MusicLM.

Dar este prima companie care face codul open-source, permițându-vă să rulați software-ul local pe dvs computer dacă aveți un GPU cu minim 16 GB de memorie, deși am reușit să-l facem să funcționeze cu doar 11 GB.

Nu vă faceți griji dacă nu aveți hardware, deoarece puteți încerca aplicația web MusicGen gratuit folosind un browser. Din demonstrația online, vă puteți aștepta să dureze puțin peste un minut pentru a genera un fragment audio de aproximativ 12 secunde.

Cum sună MusicGen?

Potrivit Meta, MusicGen poate produce mostre de muzică de înaltă calitate, deși am descoperit că cercetătorii implicați au definit de înaltă calitate ca 32kHz. Acest lucru se află undeva între cerințele de sinteză a vorbirii (16 kHz) și standardul pentru muzica digitală (44,1 kHz).

În realitate, sunetul nu îndeplinește standardele minime de calitate pe care ai putea fi obișnuit să le auzi la radio sau pe platformele de streaming. Cu toate acestea, în comparație cu alte generatoare de muzică AI și având în vedere unde se află tehnologia la momentul scrierii, calitatea audio este destul de bună, cu un nivel scăzut de zgomot în fișier.

Cât de aproape se aliniază muzica cu instrucțiunile? Puteți înțelege rapid acest lucru, ascultând exemplele pe care le-am generat mai jos. În linii mari, reușește să adere la genurile muzicale populare, menținând în același timp o structură muzicală mai coerentă în comparație cu predecesorii săi.

Cum se generează muzică folosind MusicGen

MusicGen este ușor de utilizat și nu necesită să vă înregistrați. Interfața este, de asemenea, simplă, fiind ușor de încercat pentru distracție.

Iată cum să generați muzică cu MusicGen:

1. Deschide Aplicația web MusicGen.
2. În caseta de text intitulată Descrie muzica ta, introduceți solicitarea dvs. Puteți încerca ceva la fel de simplu precum „melodia populară irlandeză” sau o puteți face mai detaliată incluzând instrumentul, tempo-ul, genul sau emoția.
3. apasă pe Genera butonul pentru a începe procesul. După un minut sau două, un player audio va apărea în modulul Muzică generată din dreapta.
4. Plasați cursorul peste modul pentru a afișa comenzile playerului și pentru a asculta fișierul sau apăsați pictograma de descărcare din colțul din dreapta sus pentru a salva fișierul pe computer. Rețineți că este disponibil doar pentru descărcare ca fișier .mp4.
5. Dacă doriți să încercați să condiționați rezultatele folosind o melodie existentă, puteți încărca o înregistrare în modulul de lângă caseta de text. Alternativ, puteți selecta Mic pentru a înregistra o melodie folosind microfonul.

Condiționarea unei melodii va folosi atât descrierea textului, cât și melodia pe care o furnizați ca referință. Acesta este un instrument util pentru modelarea rezultatelor pe care le obțineți de la MusicGen.

Care sunt restricțiile privind utilizarea MusicGen Audio?

Codul pentru MusicGen este distribuit gratuit sub licența MIT, cu puține restricții. În ceea ce privește sunetul pe care îl generați folosind modelul, nu este clar dacă există reguli legale. În schimb, s-ar putea să vrei să ții cont Avertismentul lui Meta privind utilizarea MusicGen:

„Modelul nu trebuie folosit pentru a crea sau a disemina în mod intenționat piese muzicale care creează medii ostile sau alienante pentru oameni. Aceasta include generarea de muzică pe care oamenii o vor găsi, probabil, tulburătoare, supărătoare sau jignitoare; sau conținut care propagă stereotipuri istorice sau actuale.”

Meta explică în continuare că MusicGen este destinat cercetătorilor care doresc să exploreze generarea de muzică AI și nu pentru „utilizări în aval”, ceea ce presupunem că înseamnă activități precum încărcarea și distribuirea muzicii AI pe streaming platforme.

The argumentele pro și contra etice reflectă generația de artă AI. Obținerea consimțământului pentru utilizarea datelor pentru a antrena modele AI, plus problema compensării/creditării artiștilor atunci când este cazul, sunt toate motivele pentru care Meta să o facă în siguranță.

Pe scurt, explorarea modelului pentru distracție este puțin probabil să provoace rău, dar poate fi o problemă mai spinoasă când vine vorba de utilizarea audio pentru muzică comercială. Mulți oameni rămân să se întrebe ce viitorul muzicii pop cu AI se pare ca.

Adăugând încă un model de generare de muzică la ceea ce există, Meta a lansat MusicGen, un model AI open-source capabil să genereze muzică brută dintr-o descriere text simplă. Dacă sunteți curios să încercați tehnologia, puteți face o învârtire a demonstrației folosind doar un browser web.