Bodite korak pred norijo pretvorbe besedila v glasbo z eksperimentiranjem z glasbenim orodjem Meta AI.

Meta je izdala kodo za MusicGen, še en glasbeni generator z umetno inteligenco, ki lahko pretvori besedilne opise v glasbene melodije. Demo lahko najdete na spletu, za preizkus pa potrebujete le brskalnik. Rezultati niso slabi, a več kot to dokazuje, kako daleč so glasbeni modeli AI napredovali.

Tukaj je tisto, kar morate vedeti o MusicGen in kako ustvariti glasbo.

Kaj je MusicGen?

Junija 2023 je Meta izdala svoj model glasbene generacije z umetno inteligenco, imenovan MusicGen. To ni prvo podjetje, ki se je lotilo kompleksnega problema sintetiziranja surove glasbe iz preprostega besedilnega opisa; zaenkrat lahko ustvarjajte glasbo z OpenAI's Jukebox oz ustvarite delčke pesmi z MusicLM.

Je pa prvo podjetje, ki je kodo naredilo odprtokodno, kar vam omogoča, da programsko opremo izvajate lokalno na svojem računalnik, če imate grafični procesor z najmanj 16 GB pomnilnika – čeprav nam je uspelo omogočiti delovanje le z 11 GB.

instagram viewer

Ne skrbite, če nimate strojne opreme, saj lahko brezplačno preizkusite spletno aplikacijo MusicGen v brskalniku. Iz spletne predstavitve lahko pričakujete, da bo trajalo nekaj več kot minuto, da ustvarite zvočni delček, dolg približno 12 sekund.

Kako zveni MusicGen?

Po Meti lahko MusicGen proizvaja visokokakovostne glasbene vzorce, čeprav smo odkrili, da so vključeni raziskovalci definirali visoke kakovosti kot 32 kHz. To je nekje vmes med zahtevami za sintezo govora (16 kHz) in standardom za digitalno glasbo (44,1kHz).

V resnici zvok ne ustreza minimalnim standardom kakovosti, ki ste jih morda vajeni slišati na radiu ali platformah za pretakanje. Vendar pa je v primerjavi z drugimi glasbenimi generatorji AI in glede na to, kje je tehnologija v času pisanja, kakovost zvoka dokaj dobra z nizko ravnjo šuma v datoteki.

Kako blizu je glasba usklajena z navodili? To lahko hitro dojamete, če poslušate primere, ki smo jih ustvarili spodaj. Na splošno se uspeva držati priljubljenih glasbenih žanrov, hkrati pa ohranja bolj skladno glasbeno strukturo v primerjavi s svojimi predhodniki.

Kako ustvariti glasbo z aplikacijo MusicGen

MusicGen je enostaven za uporabo in ne zahteva, da se prijavite. Vmesnik je prav tako preprost, kar olajša preizkušanje za zabavo.

Tukaj je opisano, kako ustvarjate glasbo z MusicGen:

  1. Odprite Spletna aplikacija MusicGen.
  2. V besedilnem polju z naslovom Opišite svojo glasbo, vnesite svoj poziv. Poskusite lahko nekaj tako preprostega, kot je "irska ljudska melodija", ali pa jo naredite podrobnejšo, tako da vključite inštrument, tempo, žanr ali čustva.
  3. Pritisnite Ustvari gumb za začetek postopka. Po minuti ali dveh se bo v modulu Generated Music na desni pojavil predvajalnik zvoka.
  4. Premaknite miškin kazalec nad modul, da prikažete kontrolnike predvajalnika in poslušate datoteko, ali pritisnite ikono za prenos v zgornjem desnem kotu, da shranite datoteko v svoj računalnik. Upoštevajte, da je na voljo samo za prenos kot datoteka .mp4.
  5. Če želite poskusiti pogojevati rezultate z obstoječo melodijo, lahko naložite posnetek v modul poleg besedilnega polja. Druga možnost je, da izberete mikrofon za snemanje melodije z mikrofonom.

Pogojovanje melodije bo uporabilo besedilni opis in melodijo, ki jo navedete kot referenco. To je uporabno orodje za oblikovanje rezultatov, ki jih dobite od MusicGen.

Kakšne so omejitve pri uporabi MusicGen Audio?

Koda za MusicGen se prosto distribuira pod licenco MIT z nekaj omejitvami. Kar zadeva zvok, ki ga ustvarite z uporabo modela, ni jasno, ali obstajajo kakšne pravne smernice. Namesto tega boste morda želeli upoštevati Metino opozorilo glede uporabe MusicGen:

"Model se ne sme uporabljati za namerno ustvarjanje ali razširjanje glasbenih del, ki ustvarjajo sovražna ali odtujena okolja za ljudi. To vključuje ustvarjanje glasbe, ki bi se ljudem predvidoma zdela moteča, vznemirljiva ali žaljiva; ali vsebina, ki širi zgodovinske ali trenutne stereotipe."

Meta nadalje pojasnjuje, da je MusicGen namenjen raziskovalcem, ki želijo raziskati ustvarjanje glasbe z umetno inteligenco, in ne za »uporabe na nižji stopnji«, za katere predvidevamo, da pomenijo dejavnosti, kot je nalaganje in distribucija glasbe AI pri pretakanju platforme.

The etične prednosti in slabosti odražajo umetniško generacijo AI. Pridobivanje soglasja za uporabo podatkov za usposabljanje modelov umetne inteligence in problem kompenzacije/pripisa umetnikom, kadar je to primerno, so vsi razlogi, da Meta igra varno.

Skratka, malo je verjetno, da bi raziskovanje modela za zabavo povzročilo škodo, vendar pa je lahko težavnejše vprašanje, ko gre za uporabo zvoka za komercialno glasbo. Marsikdo se sprašuje, kaj prihodnost pop glasbe z AI izgleda kot.

Meta je temu, kar je zunaj, dodala še en model za ustvarjanje glasbe, zato je izdala MusicGen, odprtokodni model AI, ki je sposoben ustvariti surovo glasbo iz preprostega besedilnega opisa. Če vas zanima preizkus tehnologije, si lahko predstavitev ogledate samo s spletnim brskalnikom.