MusicLM
MusicLM přetavuje proces podmíněné generace hudby jako hierarchický úkol modelování sekvencí na sekvence a generuje hudbu s frekvencí 24 kHz, která zůstává konzistentní po několik minut.
O nástroji
MusicLM přetavuje proces podmíněné generace hudby jako hierarchický úkol modelování sekvencí na sekvence a generuje hudbu s frekvencí 24 kHz, která zůstává konzistentní po několik minut. Jejich experimenty ukazují, že MusicLM překonává předchozí systémy v kvalitě zvuku a dodržování popisu textu. Navíc ukazujeme, že MusicLM může být podmíněn jak textem, tak melodií, takže může transformovat pískané a zpívané melodie podle stylu popsaného v textovém popisu. Pro podporu budoucího výzkumu vydáváme veřejně MusicCaps, dataset složený z 5,5 tisíc párů hudby a textu, s bohatými popisy textu poskytnutými lidskými odborníky.
Klíčové vlastnosti
- Generuje hudbu z textového popisu ve 24 kHz
- Konzistentní zvuk po dobu několika minut
- Podmínění textem i melodií (pískání, zpěv)
- Postupná generace z více navazujících textových promptů (Story Mode)
Časté dotazy
Co přesně MusicLM umí?
Generuje hudbu na základě textového popisu, například „konejšivá melodie na housle podpořená zkresleným riffem na kytaru“, a dokáže zachovat konzistenci zvuku po několik minut. Dokáže také upravit pískanou nebo zpívanou melodii podle stylu popsaného v textu.
Kolik MusicLM stojí?
Jde o výzkumný projekt Google Research prezentovaný formou ukázek a vydaného datasetu, nejedná se o komerční placenou službu.
Pro koho je MusicLM určen a jak začít?
Je určen především výzkumníkům a vývojářům zajímajícím se o generování hudby z textu – k dispozici je odborný článek a dataset MusicCaps s 5,5 tisíci páry hudby a textu pro další výzkum.
Kategorie
AI novinky do e-mailu
Každý pátek 3 vybrané AI nástroje, prompt týdne a to nejdůležitější ze světa AI – přehledně, česky a bez balastu.
Jeden z nejstarších pravidelných českých AI newsletterů.
Podobné nástroje
Hledáte alternativu k MusicLM? Tady je 6 podobných nástrojů z kategorie Úprava zvuku.
Voice AI
FreemiumPřevádí hlas v reálném čase pomocí AI a nabízí klonování hlasu, text-to-speech a hlasové agenty...
Vocal Remover
ZdarmaOdděluje vokály od instrumentální stopy v hudební nahrávce pomocí AI. Výsledkem jsou dvě samosta...
SpeechGen
FreemiumPřevádí text na řeč pomocí AI hlasů s podporou přes 150 jazyků a stažením ve formátech MP3, WAV...
RadioNewsAI
PlacenéAudio.co (dříve RadioNewsAI) generuje hotové audio zpravodajství, reklamy, počasí a dopravní inf...
Krisp
FreemiumKrisp je hlasový AI nástroj pro online schůzky, který odstraňuje hluk a ozvěnu z hovorů a automa...
Databass
ZdarmaDatabass - nejnovější AI nástroj, který změní zvukovou krajinu a umožní tvůrcům uvolnit svou zvu...
Další nástroje v kategorii Úprava zvuku
Nezůstávejte jen u nejoblíbenějších – tohle jsou další nástroje z kategorie Úprava zvuku, které stojí za prohlédnutí.
