Muusika loomine tehisintellektiga

Kuidas luua muusikat tehisintellekti abil

Tehisintellekti muusikatööriistad aitavad ideest kiiresti kuuldava kavandini jõuda. Olenevalt rakendusest võid kirjeldada stiili ja meeleolu, lisada oma sõnad, laadida üles originaalsalvestise, pikendada lõiku, asendada sõnu, miksida mõne lõigu ümber või eraldada edasiseks töötlemiseks ligikaudsed tüved.

Tulemust tasub enamasti käsitleda lähtekohana, mitte valmis väljaandena. Tehisintellekti loodud muusikas võib esineda kohmakaid sõnu, ajastusprobleeme, ebastabiilset loo struktuuri, vokaaliartefakte, soovimatut sarnasust olemasolevate teostega või produktsiooniprobleeme, mis vajavad inimese tähelepanu.

Mida tehisintellekt aitab luua

Enne tööriista valimist mõtle läbi, mida sul tegelikult vaja on. Erinevad süsteemid toetavad muusika loomise, töötlemise, heli teisendamise ja töövoo automatiseerimise erinevaid kombinatsioone.

• Laulude demod: Muuda idee, laulusõnad või muusikaline lähteülesanne mitmeks vokaali- või instrumentaalversiooniks.
• Instrumentaal- ja taustamuusika: Loo ideid videote, taskuhäälingute, mängude, esitluste või prototüüpide jaoks.
• Arranžeerimisideed: Katseta erinevate instrumentide, energiatasemete, lõikude, lõppude ja produktsioonisuundadega.
• Heli jätkamine: Pikenda meloodiat, loop'i, sissejuhatust või loo lõiku, kui tööriist toetab jätkamist.
• Lõikude töötlemine: Asenda nõrk salm või refrään, muuda sõnu või katseta alternatiivset üleminekut.
• Helikujundus: Loo heligeneraatorsüsteemi abil atmosfääre, efekte või lühikesi muusikalisi vahepalasid.
• Tüvedel põhinev töötlus: Eralda vokaal, trummid, bass või muud osad ligikaudseks töötlemiseks digitaalses audiotöötlusjaamas. Eraldatud tüved on rekonstrueeritud hinnangud, mitte tingimata algsed mitmerajalised failid.
• Kirjutamine ja planeerimine: Kasuta keelemudelit laulusõnade, akordide, loo struktuuride, metaandmete või produktsioonimärkmete ideede leidmiseks. Tekstimudeli puhul ei tohiks eeldada heliloomevõimet, kui toode seda sõnaselgelt ei toeta.

Alustuseks on tehisintellekti muusikaloometööriistade kategooria asjakohasem kui üldine vestlusrobotite kataloog. Kui soovid mõista, millist tüüpi faili muusikamudel loob, vaata ülevaadet tehisintellekti muusikaväljundist.

Mida enne alustamist ette valmistada

Tehisintellekt annab paremaid tulemusi, kui esitad selge muusikalise suuna. Formaalne muusikateooria pole vajalik, kuid kasulik on läbi mõelda järgmised punktid:

• Kas soovid terviklikku laulu, instrumentaallugu, loop'i, demot, heliefekti või heliriba jaoks mõeldud muusikalist vahepala.
• Soovitud meeleolu, üldine žanr, energiataset ja kasutuskeskkond.
• Ligikaudne tempo, kestus, struktuur või helistik, kui need üksikasjad on olulised.
• Soovitud instrumendid, vokaalitüüp, tihedus ja produktsioonitase.
• Kas vajad puhast sissejuhatust, kordamiseks sobivat lõppu, eraldi tüvesid või kindlat failivormingut.
• Milliseid sõnu, meloodiaid, salvestisi, sämpleid või hääli on sul õigus üles laadida.

Kirjelda muusikalisi omadusi, mitte ära küsi kindla artisti või loo täpset koopiat. Näiteks „meeleolukas elektrooniline lugu hõreda perkussiooni, sooja bassi ja järk-järgult kasvava filmiliku arenguga“ annab kasuliku suuna, ilma et paluksid otsest jäljendamist.

Praktiline töövoog

1. Määratle eesmärk. Otsusta, kas väljund on ligikaudne laulukirjutamise demo, taustamuusikaline vahepala, mänguprototüübi heli, väljaandmise kandidaat või arranžeerimisviide. Sellest otsusest sõltuvad sinu nõuded juhitavusele, privaatsusele, eksklusiivsusele ja litsentsimisele.
2. Valmista ette õiguste poolest korras materjal. Kasuta originaalsõnu, meloodiaid, salvestisi, sämpleid ja hääli või hangi enne nende üleslaadimist luba. Ära laadi ilma loata üles koostööpartneri vokaali, kliendi konfidentsiaalset demot ega teise artisti salvestist.
3. Koosta fokuseeritud lähteülesanne. Lisa meeleolu, üldine stiil, tempovahemik, instrumentatsioon, vokaali omadused, struktuur, kestus ja kavandatud kasutus. Esimene päring olgu hallatav, mitte kõiki võimalikke juhiseid sisaldav.
4. Loo mitu versiooni. Esimene tulemus on sageli visand. Loo mitu kandidaati ja võrdle nende struktuuri, meloodiat, vokaali, sõnu ja produktsiooni, selle asemel et eeldada, et kõige viimistletuma eelvaatega versioon on parim.
5. Muuda korraga üht peamist muutujat. Proovi teistsugust tempot, instrumentatsiooni, vokaalregistrit, sõnade lõiku või energiataset, hoides ülejäänud lähteülesande samana. Nii on lihtsam mõista, mis tulemust parandas.
6. Töötle paljutõotavat materjali. Kui valitud rakendus neid funktsioone toetab, kasuta jätkamist, lõigu asendamist, sõnade muutmist, remix'imist või kärpimist. Kui genereeritud loo struktuur on algusest lõpuni nõrk, võib uue versiooni alustamine olla korduvast pikendamisest tõhusam.
7. Vii oluline töö redaktorisse. Ekspordi võimaluse korral heli või tüved ning kasuta seejärel digitaalset audiotöötlusjaama ajastuse, arranžeeringu, häälestuse, üleminekute, dünaamika ja miksitasakaalu töötlemiseks. Tehisintellekti loodud tüvedes võib esineda lekkivat heli, võbelust, faasiprobleeme või puuduvaid transientse.
8. Lisa teadlikult inimese panus. Kirjuta sõnad ümber, salvesta vokaal, mängi instrumente, sea lõigud, loo üleminekud või töötle materjali põhjalikult. Hoia alles kuupäevadega projektifailid ja märkmed oma panuse kohta.
9. Kuula terviklik lugu üle. Kuula kõrvaklappide, kõlarite ja telefoniga. Kontrolli sõnu, hääldust, struktuuri, ajastust, soovimatuid helisid, klippimist, moonutusi, järske lõppe, loop'i ühenduskohti ja üldist tasakaalu.
10. Kontrolli enne avaldamist õigusi. Vaata üle täpne teenus, konto pakett, allalaadimise staatus, ärilise kasutuse tingimused, remix'i reeglid, säilitamistavad ja avalikustamisnõuded. Luba äriliseks kasutuseks ei tähenda sama mis garanteeritud autoriõiguslik omand.

Tehisintellekti muusika viipade näited

Kasulik muusikaviip ühendab ülesande muusikalise suuna ja praktiliste piirangutega. Näiteks:

• Instrumentaalne vahepala: „Loo 45-sekundiline instrumentaalne loop pingelise hiilimismängu stseeni jaoks. Kasuta tagasihoidlikku elektroonilist perkussiooni, madalaid pulsse, hõredaid tekstuure ja puhast loop'i ühenduskohta. Ära lisa vokaali ega järsku lõppu.“
• Loo arranžeering: „Loo nendele originaalsõnadele soe akustiline poparranžeering. Alusta vaikselt, kasvata refrään täidlasemaks, hoia vokaal selge ja lõpeta lühikese instrumentaalse lõpuga.“
• Arranžeeringute uurimine: „Genereeri sellele originaalmeloodiale kolm kontrastset arranžeeringut: intiimne klaver, atmosfääriline elektroonika ja energiline täisbänd. Hoia peamine meloodiaidee äratuntavana.“
• Heliriba variatsioon: „Loo lootusrikka lõpustseeni jaoks filmilik instrumentaalne vahepala. Alusta hõreda klaveri ja keelpillidega, lisa õrn perkussioon ning kasvata pinget järk-järgult, muutumata liiga dramaatiliseks.“

Kui kasutad heligeneraatori asemel keelemudelit, palu sellel muuta ebamäärane idee struktureeritud lähteülesandeks, pakkuda lõike, parandada sõnade sõnastust või selgitada, kuidas akordijärgnevust arendada. Seejärel anna lähteülesanne tööriistale, mis tegelikult heli genereerib.

Õiget tüüpi tööriista valimine

Otsi tööriista võimalusi, mis vastavad ülesandele, selle asemel et eeldada, et kõik tehisintellekti muusikatooted töötavad ühtemoodi.

• Tarbijatele mõeldud laulurakendused: Kasulikud terviklike laulude kiireks genereerimiseks, sõnade katsetamiseks, lõikude pikendamiseks ja arranžeeringute uurimiseks.
• Heligeneratsiooni API-d: Kasulikud siis, kui arendaja vajab programmilisi päringuid, korduvat genereerimist, väljundi juhtimist, päringute oleku kontrollimist, kiiruspiirangute käsitlemist või rakendusse integreerimist.
• Heliredaktorid ja digitaalsed audiotöötlusjaamad: Olulised siis, kui vajad pärast genereerimist täpset ajastust, miksimist, arranžeerimist, automatiseerimist või korratavat juhtimist.
• Tüvede eraldamise tööriistad: Kasulikud ligikaudseks remix'imiseks ja töötlemiseks, kuid need ei asenda algseid mitmerajalisi salvestisi.
• Keelemudelid: Kasulikud sõnade, loo struktuuride, viipade, produktsioonimärkmete, nimede, metaandmete ja kontrollnimekirjade koostamisel, kuid mitte automaatselt heli loomiseks.

Rakendused nagu Suno ja Udio on uurimuses kirjeldatud tarbijatele mõeldud muusikageneratsiooniteenuste konkreetsed näited. Nende funktsioonid, paketid, tingimused ja kättesaadavus võivad muutuda, seega kontrolli enne kindlale võimalusele toetumist kehtivat dokumentatsiooni. Automatiseeritud heligeneratsiooni jaoks võib API-põhine teenus sobida paremini kui tarbijarakendus, kuid ka siis on vaja sisu modereerimist, vigade käsitlemist, õiguste kontrolli ja inimese heakskiitu.

Kuidas nõrku tulemusi parandada

Kui genereeritud tulemus on peaaegu sobiv, kuid siiski kasutuskõlbmatu, tuvasta konkreetne probleem, selle asemel et muuta viip lihtsalt pikemaks.

• Kui arranžeering on liiga tihe, palu vähem instrumente, väiksemat tihedust või tagasihoidlikku saatepartiid.
• Kui sõnad pole arusaadavad, lihtsusta ridu, kontrolli silpide arvu ja lisa täpsed originaalsõnad, kui tööriist toetab kohandatud sõnu.
• Kui lool puudub struktuur, määra sissejuhatus, salm, eelrefrään, refrään, bridge ja outro ainult juhul, kui rakendus nendele juhistele usaldusväärselt reageerib.
• Kui väljund muutub lõikude vahel liiga palju, kasuta jätkamise või töötlemise funktsioone või ekspordi tugevaim lõik ja ehita ülejäänu käsitsi selle ümber.
• Kui vokaal kõlab ebaloomulikult, proovi teistsugust sõnastust, registrit või energiataset, selle asemel et korduvalt paluda kindla laulja häält.
• Kui miks kõlab teravalt või mudaselt, kasuta tehisintellekti tulemust visandina ja paranda seda digitaalses audiotöötlusjaamas.
• Kui vajad loop'i, märgi soovitud kestus ning palu puhast algust ja lõppu, seejärel kontrolli loop'i käsitsi.

Olulised piirangud

Tehisintellekti muusikasüsteemid ei paku igas olukorras täpset juhtimist. Tulemused võivad genereerimiskordade vahel erineda ja viipi võidakse järgida ainult ligikaudselt. Levinud probleemid on väljamõeldud või valesti hääldatud sõnad, korduvad laulusõnad, ebastabiilne vokaaliidentiteet, vale instrumentatsioon, tempomuutused, nõrgad üleminekud, ebajärjekindlad refräänid ja heliartefaktid.

Pikemad lood võivad struktuurilt kõrvale kalduda ning pikendus ei pruugi säilitada varasema lõigu täpset meloodiat või produktsiooni. Tüvede eraldamine võib tekitada heli lekkimist ja muid artefakte. Pilveteenustega võivad kaasneda ka järjekorrad, kiiruspiirangud, modereerimise ebaõnnestumised, muutuvad tootevõimalused ja sõltuvus teenusepakkuja kättesaadavusest.

Tehisintellekti väljund ei ole automaatselt ainulaadne ega autoriõigusega kaitstav. USA autoriõiguste amet on märkinud, et generatiivse tehisintellektiga loodud materjali autoriõiguslik kaitse sõltub piisavast inimese loomingulisest panusest. Ainuüksi viipamisest ei pruugi piisata, samal ajal kui inimese kirjutatud sõnad, loominguline arranžeering, valik, muutmine, esitus ja muu väljendusrikas panus võivad olla olulised. Reeglid erinevad jurisdiktsiooniti, mistõttu võib suure väärtusega väljaannete puhul vaja minna professionaalset õigusnõu.

Õigused, privaatsus ja hääle kasutamine

Laul ja helisalvestis on eraldi teosed. Sõnad ja kompositsioon puudutavad muusikateost, samal ajal kui konkreetne esitus ja produktsioon kuuluvad helisalvestise juurde. Tehisintellekti abil loodud projekt võib hõlmata ka üleslaaditud salvestiste, sämplite, vokaalide, tüvede, genereeritud materjali ja lõpliku miksi õigusi.

Loe kasutatava täpse teenuse ja paketi kehtivaid tingimusi. Tasuline pakett võib muuta allalaadimise või ärilise kasutuse õigusi, kuid ei taga automaatselt autoriõiguse omandit, eksklusiivsust ega õiguslikku puhtust. Teenusepakkujatel võivad olla erinevad reeglid avaliku jagamise, remix'imise, säilitamise, mudeli täiustamise ja üleslaaditud sisu kohta.

Demo või vokaali üleslaadimine saadab selle kolmanda osapoole teenusesse. Kontrolli, kuidas teenusepakkuja käsitleb salvestamist, kustutamist, privaatsust, viipasid, üleslaaditud heli ja hääleandmeid. Ära laadi konfidentsiaalset või avaldamata materjali üles, kui teenusega sõlmitud leping seda ei luba.

Hääle kloonimine ja artisti jäljendamine tekitavad täiendavaid riske. Ära kasuta teise inimese häält ega välimust ilma asjakohase loata ning ära kasuta äratuntava artisti nime otseteena tema stiili kopeerimiseks. Samuti tuleks loodud lugu kontrollida tahtmatu sarnasuse suhtes tuntud laulude, salvestiste, sõnade või esitajatega.

Mida enne väljaandmist kontrollida

• Veendu, et kõik sisendina kasutatud sõnad, meloodiad, salvestised, sämplid ja hääled on originaalid või nõuetekohaselt litsentsitud.
• Kuula, kas esineb sarnasust olemasolevate laulude, salvestiste, artistide ja häältega.
• Kontrolli hääldust, sõnu, ajastust, struktuuri, üleminekuid, loop'i ühenduskohti, klippimist, moonutusi ja soovimatuid artefakte.
• Kontrolli teenuse kehtivaid tingimusi, paketi õigusi, allalaadimise staatust, ärilise kasutuse reegleid ja remix'i tingimusi.
• Vaata üle levitaja, platvormi, kliendi või lepingu reeglid tehisintellekti loodud muusika ja selle avalikustamise kohta.
• Salvesta viibad, sisendfailid, genereerimise kuupäevad, mudeli või toote üksikasjad, töötlused, tüved, litsentsid ja nõusolekud.
• Hoia alles tõendid enda kirjutatud sõnade, esituste, arranžeeringute ja produktsiooniotsuste kohta.

Millal tehisintellekt ei sobi

Tehisintellekt võib olla vale valik, kui projekt nõuab garanteeritud eksklusiivsust, kindla esituse täpset reprodutseerimist, täielikult kontrollitud mitmerajalist sessiooni või õiguslikult dokumenteeritud õiguste ahelat, mida teenus ei suuda toetada. Samuti ei sobi see siis, kui tööriista kasutamine rikuks konfidentsiaalsust või nõuaks inimese või autoriõigusega kaitstud salvestise loata jäljendamist.

Suure tähtsusega kommertsväljaande puhul võib inimmuusiku, helilooja, produtsendi, inseneri või õiguste spetsialisti palkamine olla oma hinda väärt. Tehisintellekt võib siiski aidata ajurünnakul, kuid seda ei tohiks kasutada projekti nõutava loomingulise, tehnilise või õigusliku kontrolli vältimiseks.