Kwa hivyo una wimbo na itch ya kugeuza kuwa kitu ambacho watu wataacha kuvinjari. Kujifunza Jinsi ya kutengeneza Video ya Muziki kwa kutumia AI ni upangaji wa sehemu sawa, uhamasishaji, na ung'alisi. Habari njema: hauitaji studio au kikundi cha filamu. Habari bora zaidi: unaweza kabisa kuunda vibe ya sinema ukitumia zana ambazo tayari unazo na nyongeza chache za AI. Onyo la haki: ni kama kuchunga lasers-kufurahisha, lakini mkali.
Makala unayoweza kupenda kusoma baada ya hii:
🔗 Zana bora za uandishi wa nyimbo za AI: Muziki wa juu wa AI na jenereta za sauti
Gundua zana bora za AI ambazo husaidia kuandika nyimbo na kutengeneza maandishi kwa urahisi.
🔗 Jenereta bora ya muziki ya AI ni ipi? Zana bora za muziki za AI za kujaribu
Gundua mifumo kuu ya AI inayounda nyimbo za kitaalamu za muziki kiotomatiki.
🔗 Zana bora za AI za maandishi hadi muziki zinazobadilisha maneno kuwa midundo
Geuza maandishi yaliyoandikwa kuwa muziki wa kueleza kwa kutumia zana bunifu za AI.
🔗 Zana bora za kuchanganya AI kwa utengenezaji wa muziki
Boresha ubora wa muziki ukitumia programu ya hali ya juu ya kuchanganya na ustadi inayoendeshwa na AI.
Ni nini hufanya video za muziki za AI ziwezekane? ✨
Jibu fupi: mshikamano. Jibu refu: wazo wazi ambalo limesalia majaribio yako. Video bora zaidi za muziki za AI huhisi kukusudia hata zikiwa za surreal. Utagundua sifa nne thabiti:
-
Motifu moja yenye nguvu ya kuona inayojirudia kwa njia mpya
-
Marekebisho yanayofahamu mdundo - vipunguzi, mabadiliko, na miondoko ya kamera hufuata mdundo au maneno
-
Nasibu inayodhibitiwa - huhimiza mabadiliko, lakini ndani ya ubao uliobainishwa wa mtindo, rangi, na mwendo
-
Kazi safi ya chapisho - fremu thabiti, utofautishaji thabiti, na sauti fupi
Ikiwa unachukua kitu kimoja tu kutoka kwa mwongozo huu: chagua kuangalia, kisha uilinde kama joka juu ya rundo la anatoa ngumu.
Mchoro wa herufi za haraka unaofanya kazi: timu mara nyingi hutengeneza ~ risasi 20 kwa sekunde 3-5 kila moja karibu na motifu moja inayojirudia (utepe, halo, jellyfish—chagua sumu yako), kisha njia mtambuka kwenye ngoma ili kupata nishati. Picha fupi huzuia kuteleza na kuzuia vizalia vya programu kuchanganywa.
Ramani ya haraka: Njia 5 za kawaida za Jinsi ya kutengeneza Video ya Muziki ukitumia AI 🗺️
-
Maandishi hadi video
Andika vidokezo, toa klipu, ziunganishe pamoja. Zana kama vile Runway Gen-3/4 na Pika hufanya hili lisiwe na maumivu kwa picha fupi. -
Mfuatano wa picha hadi
vionjo vya vitufe vya Kubuni, kisha uhuishe kwa Usambazaji wa Video Imara au AnimateDiff kwa harakati za mtindo. -
Urekebishaji wa video hadi video
Piga picha mbaya kwenye simu yako. Ibadilishe kwa urembo uliochagua kwa mtiririko wa video hadi video. -
Kichwa kinachozungumza au kinachoimba
Kwa utendaji uliosawazishwa na midomo, oanisha sauti yako na wimbo wa uso ukitumia Wav2Lip, kisha daraja na mchanganyiko. Tumia kimaadili na kwa idhini [5]. -
Michoro ya mwendo kwanza, AI ya pili
Jenga uchapaji na maumbo katika kihariri cha jadi, kisha nyunyiza klipu za AI kati ya sehemu. Ni kama kitoweo - rahisi kupita kiasi.
Orodha ya gia na mali 🧰
-
Wimbo bora katika WAV au MP3 ya kiwango kidogo cha juu
-
Dhana ya ukurasa mmoja na ubao wa hisia
-
Ubao uliobanwa: rangi 2-3 kuu, familia 1 ya fonti, maumbo kadhaa
-
Vidokezo vya kupiga picha 6-10, kila moja ikihusishwa na matukio mahususi ya sauti
-
Hiari: picha za simu za misogeo ya mikono, kucheza, kusawazisha midomo, au B-roll dhahania
-
Muda. Sio nyingi, lakini inatosha kurudia bila hofu
Hatua kwa hatua: Jinsi ya kutengeneza Video ya Muziki ukitumia AI kuanzia mwanzo 🧪
1) Utayarishaji wa awali - niamini, hii huokoa saa 📝
-
Piga ramani ya wimbo wako. Weka alama kwenye mipigo ya chini, maingizo ya kwaya, na mijazo yoyote mikubwa. Dondosha alama kila baa 4 au 8.
-
Orodha ya risasi. Andika mstari 1 kwa kila risasi: somo, mwendo, hisia ya lenzi, palette, muda.
-
Angalia biblia. Picha sita zinazopiga mayowe yako. Rejelea mara kwa mara ili vidokezo vyako visiwe na machafuko.
-
Ukaguzi wa usafi wa kisheria. Ikiwa unatumia vipengee vya watu wengine, thibitisha leseni au ushikamane na mifumo ambayo hutoa haki za matumizi. Maktaba ya Sauti iliyojengewa ndani hutoa nyimbo zisizo na mrabaha ambazo hazina hakimiliki zinapotumiwa kama ilivyoelekezwa [2].
2) Kizazi - pata klipu zako mbichi 🎛️
-
Runway / Pika kwa maandishi-kwa-video au video-kwa-video unapotaka mwendo wa sinema haraka. Nyenzo zao hukusaidia kupanga matukio na lugha ya kamera.
-
Usambazaji wa Video Imara ikiwa unataka udhibiti zaidi na matokeo yaliyowekwa mtindo kutoka kwa picha.
-
AnimateDiff ili kuhuisha mitindo iliyopo ya picha na kudumisha uthabiti wa tabia au chapa kwenye picha zote.
-
Usawazishaji wa midomo na Wav2Lip ikiwa unahitaji mwimbaji kutoka kwa video ya uso. Weka kibali na maelezo mbele na katikati [5].
Kidokezo cha kitaalamu: weka kila klipu fupi - kama sekunde 3 hadi 5 - kisha njia mtambuka kwa mwendo. Risasi ndefu za AI zinaweza kutikisika baada ya muda kama kitoroli cha ununuzi na gurudumu moja la ajabu.
3) Chapisho - kata, rangi, maliza 🎬
-
Hariri na upake rangi katika NLE ya kitaalamu. Suluhisho la DaVinci ni njia maarufu ya kukata na kuweka alama.
-
Thibitisha mtafaruku, kata fremu zilizokufa, na uongeze nafaka laini za filamu ili picha tofauti za AI zichanganywe vyema.
-
Changanya sauti yako ili sauti zikae mbele na katikati. Ndio, hata kama picha ni nyota.
Rati ya zana kwa kutazama tu 🔧
-
Runway Gen-3/4 - mwendo wa haraka, wa sinema, urekebishaji wa video hadi video.
-
Pika - marudio ya haraka, yanayoweza kufikiwa ya kulipa kadri unavyokwenda.
-
Usambazaji wa Video Imara - picha-kwa-video yenye hesabu za fremu zinazoweza kugeuzwa kukufaa na viwango vya fremu.
-
AnimateDiff - huisha miundo yako unayoipenda ya mtindo bado bila mafunzo ya ziada.
-
Wav2Lip - usawazishaji wa midomo wa daraja la utafiti kwa vichwa vya kuzungumza au kuimba [5].
-
Suluhisho la DaVinci - uhariri uliojumuishwa na rangi.
Jedwali la Kulinganisha 🧮
Mchafuko mdogo kwa makusudi. Kama dawati langu.
| Zana | Hadhira | Bei ya juu | Kwa nini inafanya kazi |
|---|---|---|---|
| Runway Gen-3 | Waumbaji, mashirika | daraja la kati | Mwendo wa sinema, mtindo upya wa v2v |
| Pika | Wasanii wa pekee | lipa unapoenda | Rasimu za haraka, vidokezo vya haraka |
| Usambazaji wa Video Imara | Watengenezaji wa madini | inatofautiana | Picha kwa video, ramprogrammen zinazoweza kudhibitiwa |
| AnimateDiff | Watumiaji wa nguvu za SD | bure + wakati | Hugeuza mitindo tulivu kuwa mwendo |
| Mdomo wa Wav2 | Waigizaji, wahariri | huru-ish | Mfano wa utafiti wa kusawazisha midomo thabiti |
| Suluhisho la DaVinci | Kila mtu | studio ya bure + | Hariri + rangi katika programu moja, nzuri |
Vyanzo ni kurasa rasmi zilizorejelewa katika Marejeleo hapa chini.
Ushawishi ambao hufanya kazi kwa video 🧠✍️
Jaribu kiunzi hiki cha CAMERA-FX na ubadilishe kwa kila risasi:
-
C mhusika au mada: nani au nini kiko kwenye skrini
-
Kitendo : wanachofanya, kwa kitenzi
-
M ood: toni ya kihisia au vibe ya mwanga
-
E : mahali, hali ya hewa, mandharinyuma
-
R ender hisia: hisa ya filamu, lenzi, nafaka, au mtindo wa kupaka rangi
-
Angle : karibu juu, pana, dolly, crane, handheld
-
F X: chembe, mwanga, uvujaji wa mwanga
-
X -factor: maelezo moja ya kushangaza ambayo hurudiwa kwenye picha
Mfano: kwaya ya neon jellyfish inaimba kimya, kamera ya dolly ndani, gati ya usiku wa manane yenye ukungu, bokeh ya anamorphic, mkupuo wa hila, utepe wa rangi nyeupe uleule huelea katika kila risasi . Wajinga kidogo, wa kukumbukwa sana.
Usawazishaji wa midomo na utendakazi ambao hauhisi kama roboti 👄
-
Rekodi wimbo wa uso wa marejeleo kwenye simu yako. Safi, hata mwanga.
-
Tumia Wav2Lip kuoanisha maumbo ya kinywa na sauti ya wimbo wako. Anza kwa mistari mifupi kuzunguka kwaya yako, kisha upanue. Ni msimbo wa utafiti, lakini umeandikwa kwa matumizi ya vitendo [5].
-
Unganisha matokeo juu ya usuli wako wa AI, ulinganifu wa rangi, kisha uongeze mwendo mdogo kama vile kamera ili isisikike kuwa na gundi kidogo.
Ukaguzi wa maadili: tumia mfanano wako mwenyewe au uwe na idhini iliyo wazi na iliyoandikwa. Hakuna kuja kwa mshangao, tafadhali.
Kuweka wakati kwa muziki kama vile ulivyokusudia 🥁
-
Dondosha alama kwenye kila baa 8. Kata kwenye bar kabla ya chorus kwa nishati.
-
Kwenye mistari ya polepole, acha picha ziendelee na kutambulisha mwendo kupitia misogeo ya kamera, na si mikazo mikali.
-
Katika kihariri chako, gusa kupunguzwa kwa fremu chache hadi mtego uhisi kama unapiga ukingo wa fremu. Ni jambo la vibe, lakini utajua.
Kwenye YouTube, unaweza kubadilisha au kuongeza muziki kutoka kwa Maktaba ya Sauti ndani ya Studio ikiwa unahitaji nyimbo zilizofutwa kabisa au ubadilishaji wa dakika za mwisho [2].
Hakimiliki, madai ya jukwaa, na kujiepusha na matatizo ⚖️
Huu sio ushauri wa kisheria, lakini hapa kuna mazingira ya vitendo:
-
Uandishi wa kibinadamu ni muhimu. Katika maeneo mengi, nyenzo zinazozalishwa na mashine pekee haziwezi kuhitimu kupata ulinzi wa hakimiliki bila ubunifu wa kutosha wa kibinadamu. Ofisi ya Hakimiliki ya Marekani ina mwongozo kuhusu kazi zilizo na nyenzo zinazozalishwa na AI na uchambuzi wa hivi majuzi kuhusu hakimiliki [1].
-
Creative Commons ni rafiki yako unapotumia tena taswira au sampuli. Angalia masharti halisi ya leseni kabla ya kutumia kitu na ufuate sheria za maelezo [4].
-
Kitambulisho cha Maudhui cha YouTube huchanganua vipakizi dhidi ya hifadhidata kutoka kwa wenye hakimiliki. Ulinganifu unaweza kusababisha kuzuiwa, uchumaji wa mapato au ufuatiliaji, na kuna mchakato wa mzozo ulioandikwa katika Usaidizi wa YouTube [3].
-
Vimeo vile vile inatarajia kuwa na haki za kila kitu katika upakiaji wako, ikiwa ni pamoja na muziki wa chinichini. Weka uthibitisho wako wa leseni karibu.
Unapokuwa na shaka, tumia muziki kutoka kwa majukwaa ambayo hutoa haki za matumizi kwa watayarishi, au utunge yako mwenyewe. Kwa YouTube mahususi, Maktaba ya Sauti imeundwa kwa ajili hii [2].
Ifanye ionekane ya bei ghali kwa mbinu za kumalizia 💎
-
Piga kelele kidogo, kisha uimarishe kwa kugusa tu.
-
Ongeza umbile kwa safu laini ya nafaka ya filamu ili ulaini wa AI usisikie plastiki.
-
Unganisha rangi kwa LUT moja au urekebishaji rahisi wa curve unaojirudia kwenye video nzima.
-
Ongeza kiwango cha juu au kuingiliana ikiwa inahitajika. Baadhi ya jenereta za AI husafirisha kwa maazimio ya kawaida au hesabu za fremu - zingatia viboreshaji au tafsiri ya fremu baada ya kufunga hariri.
-
Majina ambayo hayapigi kelele. Weka uchapaji safi, ongeza kivuli kidogo, na ulandanishe na mdundo wa tungo za sauti. Vitu vidogo, polish kubwa.
-
Gundi ya sauti. Compressor ndogo ya basi kwenye bwana na kikomo cha upole kinaweza kuweka kilele kiwe sawa. Usiibonye, isipokuwa hiyo ndiyo kitu chako ... ambayo, hey, wakati mwingine ni.
Mapishi matatu yaliyo tayari kuiba 🍱
-
Kolagi inayoongozwa na Lyric
-
Tengeneza vigineti vya sekunde 3-4 kwa kila picha ya sauti.
-
Rudia kitu cha kawaida kama mstari, kama utepe unaoelea au ndege wa origami.
-
Kata mipigo ya mitego na ngoma za teke, kisha futa laini-yeyusha kwenye kiitikio.
-
-
Utendaji katika ndoto
-
Filamu uso wako ukiimba.
-
Tumia Wav2Lip kusawazisha midomo. Inajumuisha usuli uliohuishwa ambao hubadilika kwa nishati ya wimbo [5].
-
Weka alama kwa kila kitu kwa vivuli sawa na ngozi ya ngozi ili ionekane thabiti.
-
-
Aina ya picha + viingilio vya AI
-
Unda maneno na maumbo ya kinetic katika kihariri chako.
-
Kati ya sehemu za aina, dondosha klipu za AI za sekunde 2 zinazolingana na palette ya rangi.
-
Maliza na kipitishio cha rangi kilichounganishwa na vignette ndogo kwa kina.
-
Makosa ya kawaida ya kuepuka 🙅
-
Kuteleza kwa haraka - kubadilisha mtindo mara nyingi sana ili hakuna kitu kinachohisi kuunganishwa
-
Picha za muda mrefu - vizalia vya programu vya AI huunda kwa muda, kwa hivyo viweke haraka
-
Inapuuza sauti - ikiwa hariri haipumui na wimbo, inahisi mbali
-
Kupunguza leseni - kutumaini Content ID haitatambua sio mkakati. Itakuwa [3].
Maswali Yanayoulizwa Mara kwa Mara ambayo huokoa maumivu ya kichwa 🍪
-
Je, ninaweza kutumia wimbo maarufu chini ya matumizi ya haki? Mara chache. Matumizi ya haki ni finyu na hutegemea muktadha na hutathminiwa kila moja kwa moja chini ya vipengele vinne katika sheria za Marekani [1].
-
Je, klipu za AI zitaalamishwa? Ikiwa sauti au taswira zako zinalingana na nyenzo zilizo na hakimiliki, ndio. Weka leseni zako na uthibitisho wa haki zako. Hati za YouTube zinaonyesha jinsi madai yanavyofanya kazi na nini cha kuwasilisha [3].
-
Je, ninamiliki taswira zinazozalishwa na AI? Inategemea mamlaka na kiwango cha uandishi wako wa kibinadamu. Anza na mwongozo unaobadilika wa Ofisi ya Hakimiliki ya Marekani kuhusu AI na uwezo wa hakimiliki [1].
TL;DR🏁
Iwapo hukumbuki chochote kuhusu Jinsi ya kutengeneza Video ya Muziki kwa kutumia AI , kumbuka hili: chagua lugha inayoonekana, ramani ya midundo yako, toa picha fupi za kusudi, kisha upake rangi na ukate hadi uhisi kama wimbo. Tumia nyenzo rasmi za utoaji leseni ya muziki na sera za jukwaa ili kuepuka madai. Mengine ni kucheza. Kusema kweli, hiyo ndiyo sehemu ya kufurahisha. Na ikiwa risasi inaonekana ya ajabu - kusherehekea au kuikata. Zote mbili ni halali. Unajua jinsi ilivyo.
Bonasi: mtiririko wa kazi ndogo unaweza kufanya usiku wa leo ⏱️
-
Chagua kwaya na uandike vidokezo 3.
-
Tengeneza klipu tatu za sekunde 4 katika jenereta yako uipendayo.
-
Piga ramani ya korasi na udondoshe alama.
-
Kata klipu tatu kwa mlolongo, ongeza nafaka laini, safirisha nje.
-
Ikiwa unahitaji chaguo za sauti zisizo na hakimiliki au mbadala safi, zingatia Maktaba ya Sauti ya YouTube [2].
Umesafirisha mfano. Sasa rudia. 🎬✨
Marejeleo
[1] Ofisi ya Hakimiliki ya Marekani - Hakimiliki na Akili Bandia, Sehemu ya 2: Hakimiliki (Jan. 17, 2025) : soma zaidi
[2] Usaidizi wa YouTube - Tumia muziki na madoido ya sauti kutoka kwa Maktaba ya Sauti : soma zaidi
[3] Usaidizi wa YouTube - Kutumia Content ID (madai, uchumaji mapato, mizozo): soma zaidi
[4] Creative Commons - (chagua leseni, soma zaidi
CC [5] Wav2Lip - Hazina Rasmi ya GitHub (ACM MM 2020): soma zaidi