Meta a lansat codul pentru MusicGen, un alt generator de muzică AI care poate transforma descrierile de text în melodii muzicale. Demo-ul poate fi găsit online și aveți nevoie doar de un browser pentru a o încerca. Rezultatele nu sunt rele, dar mai mult decât atât, demonstrează cât de departe au progresat modelele muzicale AI.
Iată ce trebuie să știți despre MusicGen și cum să generați muzică.
Cuprins
Ce este MusicGen?
În iunie 2023, Meta a lansat modelul său de generație muzicală AI numit MusicGen. Nu este prima companie care abordează problema complexă a sintetizării muzicii brute dintr-o simplă descriere text; Până acum, puteți crea muzică cu Jukebox-ul OpenAI sau puteți genera fragmente de melodii cu MusicLM.
Dar este prima companie care a făcut codul open-source, permițându-vă să rulați software-ul local pe computer dacă aveți un GPU cu minim 16 GB de memorie – deși am reușit să-l facem să funcționeze cu doar 11 GB.
Nu vă faceți griji dacă nu aveți hardware, deoarece puteți încerca aplicația web MusicGen gratuit folosind un browser. Din demonstrația online, vă puteți aștepta să dureze puțin peste un minut pentru a genera un fragment audio de aproximativ 12 secunde.
Cum sună MusicGen?
Potrivit Meta, MusicGen poate produce mostre de muzică de înaltă calitate, deși am descoperit că cercetătorii implicați au definit calitatea înaltă ca 32kHz. Aceasta se află undeva între cerințele sintezei vorbirii (16 kHz) și standardul pentru muzica digitală (44,1 kHz).
În realitate, sunetul nu îndeplinește standardele minime de calitate pe care ai putea fi obișnuit să le auzi la radio sau pe platformele de streaming. Cu toate acestea, în comparație cu alte generatoare de muzică AI și având în vedere unde se află tehnologia la momentul scrierii, calitatea audio este destul de bună, cu un nivel scăzut de zgomot în fișier.
Cât de aproape se aliniază muzica cu instrucțiunile? Puteți înțelege rapid acest lucru, ascultând exemplele pe care le-am generat mai jos. În linii mari, reușește să adere la genurile muzicale populare, menținând în același timp o structură muzicală mai coerentă în comparație cu predecesorii săi.
Cum se generează muzică folosind MusicGen
MusicGen este ușor de utilizat și nu necesită să vă înregistrați. Interfața este, de asemenea, simplă, fiind ușor de încercat pentru distracție.
Iată cum să generați muzică cu MusicGen:
Condiționarea unei melodii va folosi atât descrierea textului, cât și melodia pe care o furnizați ca referință. Acesta este un instrument util pentru modelarea rezultatelor pe care le obțineți de la MusicGen.
Care sunt restricțiile privind utilizarea MusicGen Audio?
Codul pentru MusicGen este distribuit gratuit sub licența MIT, cu puține restricții. În ceea ce privește sunetul pe care îl generați folosind modelul, nu este clar dacă există reguli legale. În schimb, s-ar putea să vrei să ții cont Avertismentul lui Meta privind utilizarea MusicGen:
„Modelul nu trebuie folosit pentru a crea sau a disemina în mod intenționat piese muzicale care creează medii ostile sau alienante pentru oameni. Aceasta include generarea de muzică pe care oamenii o vor găsi, probabil, tulburătoare, supărătoare sau jignitoare; sau conținut care propagă stereotipuri istorice sau actuale.”
Meta explică în continuare că MusicGen este destinat cercetătorilor care doresc să exploreze generarea de muzică AI și nu „utilizări în aval”, ceea ce presupunem că înseamnă activități precum încărcarea și distribuirea muzicii AI pe platformele de streaming.
Avantajele și dezavantajele etice oglindesc generația de artă AI. Obținerea consimțământului pentru utilizarea datelor pentru a antrena modele AI, plus problema de compensare/creditare a artiștilor atunci când este cazul, sunt toate motivele pentru care Meta să o facă în siguranță.
Pe scurt, explorarea modelului pentru distracție este puțin probabil să provoace rău, dar poate fi o problemă mai spinoasă când vine vorba de utilizarea audio pentru muzica comercială. Mulți oameni rămân să se întrebe cum arată viitorul muzicii pop cu inteligență artificială.
Adăugând încă un model de generare de muzică la ceea ce există, Meta a lansat MusicGen, un model AI open-source capabil să genereze muzică brută dintr-o descriere text simplă. Dacă sunteți curios să încercați tehnologia, puteți face o învârtire a demonstrației folosind doar un browser web.