O lea la ua ia te oe se pese ma le naunau e liua i se mea o le a lē toe fiafia i ai tagata. O le aʻoaʻoina o le faia o se Vitio Musika ma le AI e tutusa lava le fuafuaina, faʻamalosiauina, ma le faʻaleleia. O le tala fiafia: e te lē manaʻomia se potu fai ata tifaga poʻo se 'au fai ata tifaga. O le tala fiafia: e mafai ona e fausia se siosiomaga tifaga faʻatasi ma meafaigaluega ua uma ona ia te oe ma ni nai faʻaopoopoga AI. Lapataʻiga lelei: e pei lava o le faʻaosoina o lasers-malie, ae susulu.
O tala e te ono fia faitauina pe a uma lenei:
🔗 Meafaigaluega sili ona lelei mo le tusiaina o pese a le AI: Musika sili ona lelei ma fatuga pese a le AI
Saili meafaigaluega sili ona lelei a le AI e fesoasoani e tusi pese ma faigofie ona fatuina upu o pese.
🔗 O le ā le masini fa'atupu musika AI sili ona lelei? Meafaigaluega musika AI sili ona lelei e fa'ata'ita'i
Su'esu'e fa'avae ta'uta'ua o le AI e otometi lava ona fatuina ni pese musika fa'apolofesa.
🔗 Meafaigaluega sili ona lelei a le AI mo tusitusiga-i-musika e liua ai upu i ni pese
Liliu tusitusiga i musika fa'aalia lagona e fa'aaoga ai meafaigaluega fa'aonaponei fa'apitoa (AI).
🔗 Meafaigaluega sili ona lelei a le AI mo le fa'afefiloi o musika
Fa'aleleia le tulaga lelei o musika i polokalama fa'apitoa fa'afefiloi ma fa'aleleia musika e fa'avae i luga o le AI.
O le ā e mafai ai ona fa'aogaina vitio musika AI? ✨
Tali puupuu: felagolagomaʻi. Tali umi: o se manatu manino e sao mai au faʻataʻitaʻiga. O vitio musika sili ona lelei a le AI e foliga mai e faʻamoemoeina e tusa lava pe e le moni. O le ae matauina ni uiga tutusa e fa:
-
O se mamanu vaaia malosi e tasi e toe fai i ni auala fou
-
Fa'asa'oga e iloa ai le fati - o vaega e tipi, fesuia'iga, ma gaioiga a le meapueata e mulimuli i le fati po'o upu o pese
-
Fa'atonutonuina o le fa'afuase'i - e fa'aosofia ai suiga, ae i totonu o se fa'atulagaga fa'amatalaina o le sitaili, lanu, ma le gaioiga
-
Galuega mae'a lelei - fa'avaa mautu, eseesega tutusa, ma leo manino
Afai e na'o le tasi le mea e te aveina mai lenei ta'iala: filifili se foliga, ona puipui lea e pei o se tarako i luga o se faaputuga o tisiki malo.
O se mamanu vave e aoga: e masani ona faia e 'au le ~20 fana i le 3–5 sekone i le ta'itasi i le tasi mamanu e toe fai (lipine, halo, jellyfish—filifili lau mea oona), ona tipi lea i luga o talipalau mo le malosi. O fana pupuu e taofia ai le fe'avea'i ma taofia ai mea taua mai le fa'aputuina.
O le fa'afanua vave: 5 auala masani i le auala e fai ai se Vitio Musika ma le AI 🗺️
-
Tusitusiga i le vitio
Tusi ni fa'atonuga, faia ni vaega pupuu, ma su'i fa'atasi. O meafaigaluega e pei o le Runway Gen-3/4 ma le Pika e faigofie ai lenei mea mo ni ata pupuu. -
Fa'asologa o ata i le gaioiga.
Fa'atulaga le mamanu i ata, ona fa'aola lea i le Stable Video Diffusion po'o le AnimateDiff mo ni gaioiga fa'alelei. -
Fa'aleleiga o le vitio i le vitio
Pu'e ni ata pu'e pu'e i lau telefoni. Toe fa'alelei i le matagofie ua e filifilia i se faiga fa'atino o vitio i le vitio. -
Ulu tautala pe usu
Mo le faatinoga e fa'apipi'i i laugutu, fa'apipi'i lau leo ma se pese foliga e fa'aaoga ai le Wav2Lip, ona fa'avasega lea ma tu'ufa'atasia. Fa'aaoga ma le amiotonu ma le maliega [5]. -
Muamua ata gaoioi, lona lua AI
Fausia le mamanu ma foliga i se faatonu masani, ona sausau lea o ni ata pupuu AI i le va o vaega. E pei o le fa'amanogi - e faigofie ona soona fai.
Lisi siaki o meafaigaluega ma aseta 🧰
-
O le pese ua mae'a ona fa'amauina i le WAV po'o le MP3 maualuga le bit-rate
-
O se manatu e tasi le itulau ma le moodboard
-
O se paleti fa'atapula'aina: 2–3 lanu autū, 1 le aiga o mata'itusi, ni nai mamanu
-
Fa'aosofiaga mo ata e 6–10, e feso'ota'i ta'itasi ma ni vaega patino o pese
-
Filifiliga: ata telefoni o gaioiga o lima, siva, lip-sync, po'o le abstract B-roll
-
Taimi. E le tele, ae lava e toe fai ai e aunoa ma le popole
La'asaga i lea la'asaga: Auala e fai ai se Vitio Musika ma le AI mai le amataga 🧪
1) A'o le'i faia le gaosiga - talitonu mai ia te a'u, e sefe ai itula 📝
-
Fa'atulaga le fa'afanua o le pese mo lau pese. Fa'ailoga ia fa'aitiitiga o le leo, fa'asologa o le pese fa'atasi, ma so'o se fa'atumuga tetele. Fa'apa'u ni fa'ailoga i pa ta'i 4 pe 8.
-
Lisi o ata. Tusi le laina e tasi i le ata: mataupu, gaioiga, lagona o le tioata o le tioata, paleti, umi.
-
Va'ai i le Tusi Paia. Ono ata e te lagona ai le fiafia. Ia fa'asino i ai i taimi uma ina ia 'aua ne'i fenumia'i au fa'atonuga.
-
Siakiina o le mafaufau lelei faaletulafono. Afai o loʻo e faʻaaogaina aseta a isi vaega, faʻamaonia le laisene pe pipii i faʻavae e tuʻuina atu ai aia tatau e faʻaaoga ai. Mo musika i luga o le YouTube, o le Faletusi Leo e tuʻuina atu ai pese e leai se totogi ma e saogalemu mai le puletaofia pe a faʻaaogaina e tusa ai ma faʻatonuga [2].
2) Tupulaga - ia maua au ata mata 🎛️
-
Ala savali / Pika mo tusitusiga-i-vitio po'o vitio-i-vitio pe a e mana'o vave i gaioiga fa'ata'ita'i. O a latou punaoa e fesoasoani ia te oe e fa'atulaga vaaiga ma le gagana a le meapueata.
-
Fa'asalalauina o Vitio Mautu pe afai e te mana'o i le sili atu le pulea ma ni taunuuga fa'alelei mai ata pu'e.
-
AnimateDiff e fa'aolaola ai sitaili o ata o lo'o iai ma fa'atumauina le tutusa o uiga po'o fa'ailoga i ata uma.
-
Lip-sync ma le Wav2Lip pe afai e te manaʻomia se tagata pese mai se vitio foliga. Ia faʻamuamua le maliega ma le faʻasinomaga [5].
Fautuaga fa'apitoa: ia pupuu vaega ta'itasi - pe tusa o le 3 i le 5 sekone - ona tipi lea mo le saoasaoa. O ata uumi a le AI e mafai ona fe'alua'i i le aluga o taimi e pei o se ta'avale fa'atau oloa ma se uili ese e tasi.
3) Fa'auma - tipi, vali, fa'auma 🎬
-
Fa'asa'o ma valivali i se NLE fa'apolofesa. O le DaVinci Resolve o se polokalama lauiloa uma-i-le-tasi mo le tipiina ma le fa'avasegaina.
-
Fa'amautu le tetete o le leo, tipi ese fa'avaa e le atoatoa, ma fa'aopoopo ni fasi ata vaivai ina ia sili atu ona lelei le fa'afefiloi o ata eseese a le AI.
-
Fa'afefiloi lau leo ina ia fetaui lelei pesega. Ioe, tusa lava pe o ata vaaia o le autu lea.
O le fa'aputuga o meafaigaluega i se vaaiga pu'upu'u 🔧
-
Runway Gen-3/4 - gaioiga fa'avavevave, fa'ata'ita'iga tifaga, toe fa'aleleia o le faiga mai vitio i vitio.
-
Pika - ni fa'asologa vave, e mafai ona totogi pe a e fa'aaoga.
-
Fa'asalalauina o Vitio Mausali - ata-i-vitio ma le aofa'i o fa'avaa ma fua fa'atatau o fa'avaa e mafai ona fetu'una'i.
-
AnimateDiff - fa'aolaola au fa'ata'ita'iga e te fiafia i ai i le faiga o ata e aunoa ma se a'oa'oga fa'aopoopo.
-
Wav2Lip - fa'atulagaina o le fa'aogaina o le lip-sync mo ulu e tautala pe pepese [5].
-
DaVinci Resolve - fa'asa'oga tu'ufa'atasi ma lanu.
Siata Fa'atusatusa 🧮
E fai si palapalā ma le loto i ai. E pei o la'u laulau.
| Meafaigaluega | Le aofia | Tau fa'atatau | Aiseā e aoga ai |
|---|---|---|---|
| Ala Ta'avale Gen-3 | O ē na faia, o ofisa | tulaga ogatotonu | Gaioiga fa'ata'ita'i, toe fa'aleleia o le v2v |
| Pika | Tufuga to'atasi | totogi a'o e alu | Tusiata vave, fa'atonuga vave |
| Fa'asalalauina o Vitio Mausali | Tagata atia'e Tinkerers | e fesuisuia'i | Ata i le vitio, fps e mafai ona pulea |
| Fa'aolaola Eseesega | Tagata fa'aoga eletise SD | taimi avanoa + | Liliu sitaili e le minoi i le gaioiga |
| Wav2Lip | Tagata fa'atino, faatonu | e pei o se tagata saoloto | Fa'ata'ita'iga malosi o su'esu'ega o le lip-sync |
| DaVinci Resolve | Tagata uma | potu fa'atino fua + | Fa'asa'o + valivali i le tasi polokalama, manaia |
O punaoa o itulau aloaia ia o loʻo faʻasino i ai i Faʻamatalaga o loʻo i lalo.
O se fa'aosofiaga e aoga moni lava mo vitio 🧠✍️
Taumafai i le fa'avae lenei o le CAMERA-FX ma fa'asa'o i ata ta'itasi:
-
Tagata po'o le autu: o ai po'o le a le mea o lo'o i luga o le lau
-
O se gaioiga: mea latou te faia, faatasi ai ma se veape
-
Lagona : leo fa'alagona po'o le siosiomaga o le malamalama
-
Siosiomaga : nofoaga, tau, talaaga
-
R ender: ata tifaga, tioata, fatu, po'o le sitaili valivali
-
O se tulimanu: latalata, lautele, pepe taalo, keleni, lima
-
F X: vaega ninii, pupula, tafega o le malamalama
-
X -factor: o se tasi fa'amatalaga ofo e toe fai i ata uma
Faataitaiga: pepese filemu le aufaipese a le neon jellyfish, o loo i totonu le meapueata, o loo i ai le uafu i le vaeluaga o le po e pei o le puaoa, o le bokeh e le masani ai, o le susulu malie o le ata, o le lipine lanumoana lava e tasi e opeopea i ata taitasi . E fai si valea, ae e ese le manatua pea.
Lip-sync ma le faatinoga e le lagona e pei o se roboti 👄
-
Pu'e se ata o foliga e fa'asino i ai i lau telefoni. Mama, tutusa le malamalama.
-
Faaaoga le Wav2Lip e fa'atulaga ai foliga o le gutu i le leo o lau pese. Amata i ni laina pupuu i lau fa'aili, ona fa'alautele lea. O se tusitusiga su'esu'e, ae ua fa'amaumauina mo le fa'aaogaina moni [5].
-
Tuufaatasi le iuga i luga o lau talaaga AI, faatusatusa lanu, ona faaopoopo lea o ni gaioiga laiti e pei o le luelue a le meapueata ina ia aua ne'i lagona le pipii.
Siakiina o amioga mama: fa'aaoga ou lava foliga pe ia i ai se fa'atagaga tusitusia manino. Aua ne'i faia ni fa'aaliga e te'i ai.
Taimi lelei i musika e pei ona e fa'amoemoeina 🥁
-
Fa'apa'ū ni maka i pa ta'i 8. 'Oti'oti le pa a'o le'i amataina le fa'aupuga mo le malosi.
-
I fuaiupu e telegese, ia fa'atuai pea ata ma fa'aalia se gaioiga e ala i gaioiga a le meapueata, ae le o ni tipi malolosi.
-
I lau faatonu, e tipi le nudge i ni nai fa'avaa se'ia o'o ina lagona e le snare e pei o lo'o tu'i le pito o le fa'avaa. O se mea e fa'afiafiaina ai, ae o le a e iloa lava.
I luga o le YouTube, e mafai fo'i ona e sui pe fa'aopoopo musika mai le Audio Library i totonu o le Studio pe afai e te mana'omia ni pese ua mae'a ona fa'amamaina pe sui i le minute mulimuli [2].
Puletaofia, tagi a le fausaga fa'avae, ma le aloese mai fa'alavelave ⚖️
E lē o se fautuaga faaletulafono lenei, ae o le auala moni lenei e faatino ai:
-
E tāua le tusitala faaletagata. I le tele o nofoaga, o mea na gaosia e masini atonu e lē agavaa mo le puipuiga o le puletaofia e aunoa ma le lava o le fatufatuga faaletagata. O loo i ai i le Ofisa o Puletaofia a le Iunaite Setete ni taiala i galuega o loo i ai mea na gaosia e le AI ma ni auiliiliga talu ai nei i luga o le aia tatau e puletaofia ai [1].
-
le Creative Commons o lau uo lea pe a toe faʻaaogaina ata vaaia poʻo faʻataʻitaʻiga. Siaki tonu tuutuuga o le laisene aʻo leʻi faʻaaogaina se mea ma mulimuli i tulafono o le faʻailoga [4].
-
le Content ID a le YouTube ia mea ua lafoina i luga e fa'asaga i se fa'amaumauga mai ē e umia aia tatau. O fetauiga e mafai ona o'o atu ai i poloka, maua o tupe, po'o le siakiina, ma o lo'o iai se faiga o feeseesea'iga ua fa'amaumauina i le Fesoasoani a le YouTube [3].
-
Vimeo ia te oe aia tatau i mea uma o lo'o e lafoina i luga, e aofia ai musika i tua. Ia teu lau fa'amaoniga o le laisene i tafatafa ane.
A iai se masalosalo, fa'aaoga musika mai fa'asalalauga e manino lava le tu'uina atu o aia tatau mo le au fatu, pe fatu sau oe lava musika. Mo le YouTube lava ia, ua fausia Faletusi Leo
Ia foliga taugata i ni togafiti fa'auma 💎
-
Aveese mālū le pisa, ona fa'asa'o lea i sina pa'i itiiti.
-
Fa'aopoopo le foliga i se vaega vaivai e pei o se ata tifaga ina ia 'aua ne'i lagona le lamolemole o le AI e pei o se mea palapalā.
-
Fa'atasia le lanu i le LUT e tasi pe fa'aaoga se fetu'una'iga faigofie o pi'o e toe fai i le vitio atoa.
-
Fa'aleleia pe fa'aopoopo pe a mana'omia. O nisi o masini fa'atekinolosi fa'a-AI e auina atu i fafo i ni fa'ai'uga talafeagai pe o le aofa'i o fa'avaa - mafaufau i mea fa'aopoopo pe fa'aopoopo fa'avaa pe a uma ona e loka le fa'asa'oga.
-
Ulutala e lē fa'a'ole'ole. Ia mamā le fa'ailoga o le mata'itusi, fa'aopoopo se ata paolo mālū, ma fa'atulaga i le fati o fa'aupuga o upu. Mea laiti, fa'alelei tele.
-
Kelu leo. O se tama'i compressor bus i le master ma se limiter mālū e mafai ona fa'afilemu ai tumutumu. 'Aua le olopalaina, se'i vagana ua e fiafia i ai... lea, i nisi taimi e faapena.
Tolu fua o mea'ai ua sauni e gaoi 🍱
-
Fa'aputuga fa'asolo e ta'ita'ia e upu pese
-
Ia faia ni ata pupuu e le masani ai e 3–4 sekone le umi mo ata pese taʻitasi.
-
Toe fai se mea faitino masani e fai ma laina faataamilo, e pei o se lipine opeopea po o se manulele origami.
-
'Oti'oti i leo o le snare ma le kick drums, ona fa'aaoga lea o le leo fa'alava vaivai e fa'afefiloi ai le musika i le chorus.
-
-
Faatinoga i se miti
-
Pueata ou foliga o lo'o pepese.
-
Faaaoga le Wav2Lip e loka ai le lip-sync. Fa'apipi'i i luga o ata fa'aolaola e fa'asolosolo malie i le malosi o pese [5].
-
Fa'avasega mea uma i ata tutusa ma le lanu o le pa'u ina ia foliga tutusa.
-
-
Ituaiga ata + fa'aopoopoga AI
-
Fausia ni upu ma ni foliga fa'atino i lau faatonu.
-
I le va o vaega o mataitusi, fa'apa'u i lalo ni vipiuta AI e 2-sekone le umi e fetaui ma le lanu.
-
Fa'auma i se fa'asologa lanu tu'ufa'atasi ma se tama'i fa'amatalaga pu'upu'u mo le loloto.
-
Mea sese masani e ʻalofia 🙅
-
Fe'avea'i vave - suia soo le sitaili o lea e leai se mea e foliga mai e feso'ota'i
-
Ata uumi tele - e fa'atupuina meafaitino a le AI i le aluga o taimi, o lea ia vave ona fa'atino
-
Le amana'iaina o le leo - afai e le fetaui le fa'asa'oga ma le pese, e foliga mai e le talafeagai
-
O le fa'afitia o le laisene - o le fa'amoemoe e le matauina e le Content ID e le o se fuafuaga. O le a iloa [3].
FAQ mo falaoa e fa'asaoina ai tiga o le ulu 🍪
-
E mafai ona ou fa'aaogaina se pese lauiloa i lalo o le fa'aaogaina talafeagai? E seasea lava. O le fa'aaogaina talafeagai e fa'atapula'aina ma fa'alagolago i le tala'aga ma e iloiloina i lea mataupu ma lea mataupu i lalo o mea e fa i le tulafono a Amerika [1].
-
O le a fa'ailogaina ni ata pu'e fa'a-AI? Afai e tutusa au leo po'o ata ma mea ua puipuia e le puletaofia, ioe. Taofi au laisene ma fa'amaoniga o aia tatau. O fa'amaumauga a le YouTube o lo'o fa'aalia ai le fa'atinoina o tagi ma mea e tu'uina atu [3].
-
E ana ia te aʻu ni ata vaaia ua gaosia e le AI? E fuafua lava i le pulega ma le tele o lou tusitala faaletagata. Amata i le taiala faifai pea a le Ofisa o Puletaofia a le Iunaite Setete i le AI ma le aia tatau e pulea ai e le puletaofia [1].
TL;DR🏁
Afai e te le manatua se isi mea e uiga i le Auala e fai ai se Vitio Musika ma le AI , ia manatua lenei mea: filifili se gagana vaaia, fa'atulaga au fati, faia ni ata pupuu ma fa'amoemoeina, ona valivali lea ma tipi se'ia o'o ina foliga tutusa ma le pese. Faaaoga punaoa aloaia mo laisene musika ma faiga fa'avae o le fa'avae e 'alo'ese ai mai fa'amatalaga. O le isi vaega o le ta'alo. O le mea moni, o le vaega malie lena. Ma afai e foliga ese se ata - fa'amanatu pe tipi. E aoga uma ia mea e lua. Ua e iloa le auala.
Ponesi: fa'asologa o galuega laiti e mafai ona e faia i le po nei ⏱️
-
Filifili se aufaipese ma tusi ni fesili se 3.
-
Fausia ni vitio se tolu e 4-sekone le umi i lau masini fa'aeletoroni e te fiafia i ai.
-
Fa'afanua o le pese (beat map) ma fa'ailoga o le fa'aupuga (chorus) ma fa'ailoga o le pa'ū (drop markers).
-
'Oti'oti fa'asolosolo ia kilipa e tolu, fa'aopoopo i ai se fatu vaivai, fa'atau atu i fafo.
-
Afai e te manaʻomia ni filifiliga leo e puipuia e le puletaofia poʻo se isi mea e sui ai, mafaufau i le Faletusi Leo a le YouTube [2].
Ua e fa'ato'a lafoina atu se fa'ata'ita'iga. Toe fai nei. 🎬✨
Fa'asinomaga
[1] Ofisa o Puletaofia a le Iunaite Setete - Puletaofia ma le Atamai Fa'apitoa, Vaega 2: Puletaofia (Ianuari 17, 2025) : faitau atili
[2] Fesoasoani i le YouTube - Fa'aaoga musika ma aafiaga leo mai le Faletusi Leo : faitau atili
[3] Fesoasoani i le YouTube - Fa'aaogaina o le ID o Mataupu (tagi, tupe maua, feeseesea'iga): faitau atili
[4] Creative Commons - E uiga i Laisene CC (aotelega, fa'ailoga, filifiliga laisene): faitau atili
[5] Wav2Lip - Fa'amaumauga Aloaia a le GitHub (ACM MM 2020): faitau atili