Kwa hivyo una wimbo na hamu ya kuubadilisha kuwa kitu ambacho watu wataacha kukitafuta. Kujifunza Jinsi ya kutengeneza Video ya Muziki ukitumia AI ni sawa na kupanga, kushawishi, na kuiboresha. Habari njema: huhitaji studio au timu ya filamu. Habari njema zaidi: unaweza kujenga hisia ya sinema kwa kutumia zana ulizo nazo tayari na nyongeza chache za AI. Onyo la haki: ni kama vile kuchunga leza - ni jambo la kufurahisha, lakini ni angavu.
Makala ambazo unaweza kupenda kusoma baada ya hii:
🔗 Zana bora za uandishi wa nyimbo za AI: Muziki bora wa AI na jenereta za mashairi
Gundua zana bora za AI zinazosaidia kuandika nyimbo na kutoa mashairi kwa urahisi.
🔗 Jenereta bora ya muziki ya AI ni ipi? Zana bora za muziki za AI za kujaribu
Gundua mifumo inayoongoza ya akili bandia inayounda nyimbo za kitaalamu za muziki kiotomatiki.
🔗 Zana bora za AI zinazobadilisha maneno kuwa melodi
Badilisha maandishi yaliyoandikwa kuwa muziki wa kuelezea hisia kwa kutumia zana bunifu za AI.
🔗 Zana bora za kuchanganya akili bandia kwa ajili ya utengenezaji wa muziki
Boresha ubora wa muziki kwa kutumia programu ya hali ya juu ya kuchanganya na kusimamia muziki inayoendeshwa na akili bandia.
Ni nini kinachofanya video za muziki za AI ziwezekane? ✨
Jibu fupi: uthabiti. Jibu refu: wazo wazi linalosalia majaribio yako. Video bora za muziki za AI huhisiwa kwa makusudi hata zinapokuwa za ajabu. Utaona sifa nne zinazofanana:
-
Motifu moja yenye nguvu inayoonekana ambayo hurudia kwa njia mpya
-
Marekebisho yanayozingatia mdundo - mikato, mabadiliko, na mienendo ya kamera hufuata mdundo au maneno ya wimbo
-
Ubaguzi unaodhibitiwa - husababisha mabadiliko, lakini ndani ya rangi maalum ya mtindo, rangi, na mwendo
-
Safisha kazi ya baada ya kazi - fremu thabiti, utofautishaji thabiti, na sauti nzuri
Ukichukua jambo moja tu kutoka kwa mwongozo huu: chagua mwonekano, kisha uulinde kama joka juu ya rundo la diski kuu.
Muundo wa haraka wa kesi unaofanya kazi: timu mara nyingi hutoa risasi ~20 kwa sekunde 3-5 kila moja karibu na motifu moja inayojirudia (riboni, halo, jellyfish—chagua sumu yako), kisha kata ngoma kwa nguvu. Picha fupi huzuia kuteleza na kuzuia mabaki yasichanganyike.
Ramani ya haraka: Njia 5 za kawaida za Jinsi ya kutengeneza Video ya Muziki kwa kutumia AI 🗺️
-
Tuma ujumbe mfupi hadi video
Andika vidokezo, tengeneza klipu, vishone pamoja. Vifaa kama Runway Gen-3/4 na Pika hufanya hii iwe rahisi kwa picha fupi. -
Mfuatano wa picha hadi mwendo.
Buni picha za vitufe, kisha uhuishe kwa kutumia Usambazaji wa Video Ulio imara au AnimateDiff kwa ajili ya mwendo uliopangwa. -
Uundaji wa mitindo ya video hadi video.
Piga picha zisizo za kawaida kwenye simu yako. Ibadilishe kulingana na urembo uliochagua kwa kutumia mtiririko wa kazi wa video hadi video. -
Kichwa cha kuzungumza au kuimba
Kwa utendaji unaolingana na midomo, unganisha sauti yako na wimbo wa uso kwa kutumia Wav2Lip, kisha panga na changanya. Tumia kimaadili na kwa idhini [5]. -
Michoro ya mwendo kwanza, AI ya pili
Jenga uchapaji na maumbo katika kihariri cha kitamaduni, kisha nyunyiza klipu za AI kati ya sehemu. Ni kama viungo - ni rahisi kuzidisha.
Orodha ya vifaa na mali 🧰
-
Wimbo uliobobea katika WAV au MP3 ya kiwango cha juu cha biti
-
Dhana ya ukurasa mmoja na ubao wa hisia
-
Paleti yenye vikwazo: rangi kuu 2–3, familia 1 ya fonti, maumbo kadhaa
-
Vidokezo vya kupiga picha 6-10, kila moja likihusiana na matukio maalum ya wimbo
-
Hiari: picha za simu zinazoonyesha mienendo ya mikono, densi, usawazishaji wa midomo, au B-roll fupi
-
Muda. Sio mwingi, lakini wa kutosha kurudia bila hofu
Hatua kwa hatua: Jinsi ya kutengeneza Video ya Muziki ukitumia AI kuanzia mwanzo 🧪
1) Kabla ya uzalishaji - niamini, hii inaokoa saa 📝
-
Piga ramani ya wimbo wako. Weka alama kwenye midundo ya chini, ingizo la kwaya, na mijazo yoyote mikubwa. Weka alama kila baada ya mihimili 4 au 8.
-
Orodha ya picha. Andika mstari 1 kwa kila picha: mada, mwendo, hisia ya lenzi, rangi, muda.
-
Tazama Biblia. Picha sita zinazopiga kelele kwa hisia zako. Zirejelee kila mara ili vidokezo vyako visiingie kwenye machafuko.
-
Uhakiki wa usawa wa kisheria. Ikiwa unatumia mali za watu wengine, thibitisha leseni au fuata mifumo inayotoa haki za matumizi. Kwa muziki kwenye YouTube, Maktaba ya Sauti hutoa nyimbo zisizo na mrahaba ambazo ni salama kwa hakimiliki zinapotumika kama ilivyoelekezwa [2].
2) Kizazi - pata klipu zako mbichi 🎛️
-
Runway / Pika kwa ajili ya maandishi-hadi-video au video-hadi-video unapotaka mwendo wa sinema haraka. Rasilimali zao hukusaidia kupanga mandhari na lugha ya kamera.
-
Usambazaji wa Video Ulio imara ikiwa unataka udhibiti zaidi na matokeo yaliyotengenezwa kwa mtindo kutoka kwa picha za video.
-
AnimateDiff ili kuhuisha mitindo ya picha iliyopo na kudumisha uthabiti wa mhusika au chapa kwenye picha zote.
-
Sawazisha midomo na Wav2Lip ikiwa unahitaji mwimbaji kutoka kwa video ya uso. Weka idhini na maelezo mbele na katikati [5].
Ushauri wa kitaalamu: weka kila kipande kifupi - kama sekunde 3 hadi 5 - kisha kata kwa ajili ya mwendo. Picha ndefu za AI zinaweza kuyumbayumba baada ya muda kama toroli ya ununuzi yenye gurudumu moja la ajabu.
3) Chapisha - kata, tia rangi, maliza 🎬
-
Hariri na upake rangi katika NLE ya kitaalamu. DaVinci Resolve ni kifaa maarufu cha kukata na kuainisha.
-
Thibitisha mtetemo, punguza fremu zilizokufa, na ongeza chembechembe laini za filamu ili picha tofauti za AI zichanganyike vyema.
-
Changanya sauti yako ili sauti ziwe mbele na katikati. Ndiyo, hata kama taswira ndizo zinazovutia.
Mkusanyiko wa zana kwa muhtasari 🔧
-
Runway Gen-3/4 - inayoweza kuendeshwa kwa kasi, mwendo wa sinema, urekebishaji wa video-hadi-video.
-
Pika - marudio ya haraka, malipo yanayopatikana unapotaka.
-
Usambazaji wa Video Ulio imara - picha hadi video yenye hesabu za fremu zinazoweza kubadilishwa na viwango vya fremu.
-
AnimateDiff - huisha mifano yako uipendayo ya mtindo tuli bila mafunzo ya ziada.
-
Wav2Lip - mpangilio wa usawazishaji wa midomo kwa ajili ya vichwa vya kuongea au kuimba [5].
-
DaVinci Resolve - uhariri na rangi jumuishi.
Jedwali la Ulinganisho 🧮
Imechafuka kidogo kimakusudi. Kama dawati langu.
| Zana | Hadhira | Bei ya juu | Kwa nini inafanya kazi |
|---|---|---|---|
| Runway Gen-3 | Waumbaji, mashirika | daraja la kati | Mwendo wa sinema, mtindo mpya wa v2v |
| Pika | Wasanii wa pekee | lipa unapoendelea | Rasimu za haraka, vidokezo vya haraka |
| Usambazaji wa Video Ulio imara | Watengenezaji wa Tinkerers | hutofautiana | Picha hadi video, fps zinazoweza kudhibitiwa |
| Uhuishaji Tofauti | Watumiaji wa nguvu ya SD | muda wa bure + | Hubadilisha mitindo tuli kuwa mwendo |
| Wav2Lip | Waigizaji, wahariri | huru-ish | Mfano thabiti wa utafiti wa usawazishaji wa midomo |
| Suluhisho la DaVinci | Kila mtu | studio ya bure + | Hariri + kupaka rangi katika programu moja, nzuri |
Vyanzo ni kurasa rasmi zilizorejelewa katika Marejeleo hapa chini.
Ushauri ambao unafaa kwa video 🧠✍️
Jaribu jukwaa hili la CAMERA-FX na urekebishe kwa kila picha:
-
Mhusika au mada: ni nani au nini kilicho kwenye skrini
-
Kitendo : wanachofanya, kwa kutumia kitenzi
-
Hali ya hewa: toni ya hisia au mwonekano wa mwanga
-
Mazingira : mahali, hali ya hewa, mandharinyuma
-
R ender: hisa ya filamu, lenzi, nafaka, au mtindo wa uchoraji
-
Pembe : karibu, pana, dolly, kreni, inayoshikiliwa kwa mkono
-
F X: chembe, mwanga, uvujaji wa mwanga
-
X : maelezo moja ya kushangaza yanayojirudia kwenye picha
Mfano: kwaya ya neon jellyfish inaimba kimya kimya, kamera ya dolly ndani, gati ya usiku wa manane yenye ukungu, bokeh isiyo na umbo, halation ndogo, utepe uleule wa kijani kibichi unaelea katika kila picha . Inachekesha kidogo, inakumbukwa ajabu.
Usawazishaji wa midomo na utendaji ambao hauonekani kama roboti 👄
-
Rekodi wimbo wa uso wa marejeleo kwenye simu yako. Safi, nyepesi sawasawa.
-
Tumia Wav2Lip ili kupanga maumbo ya mdomo na sauti ya wimbo wako. Anza na mistari mifupi kuzunguka kwaya yako, kisha upanue. Ni msimbo wa utafiti, lakini umeandikwa kwa matumizi ya vitendo [5].
-
Unganisha matokeo juu ya mandharinyuma yako ya AI, rangi inayolingana, kisha ongeza mwendo mdogo kama mwendo wa kamera ili isihisi kama gundi kidogo.
Ukaguzi wa maadili: tumia mfano wako mwenyewe au uwe na ruhusa iliyoandikwa wazi. Tafadhali usishangae.
Kufikia wakati wa muziki kama ulivyokusudia 🥁
-
Weka alama kwenye kila pau 8. Kata kwenye pau kabla ya kiitikio ili kupata nishati.
-
Kwenye mistari ya polepole, acha picha ziendelee na utoe mwendo kupitia miondoko ya kamera, si mipigo migumu.
-
Katika kihariri chako, vuta vuta vuta kwa fremu chache hadi mtego uhisi kama unapiga ukingo wa fremu. Ni jambo la kuvutia, lakini utajua.
Kwenye YouTube, unaweza hata kubadilisha au kuongeza muziki kutoka kwa Maktaba ya Sauti ndani ya Studio ikiwa unahitaji nyimbo zilizosafishwa kikamilifu au ubadilishaji wa dakika za mwisho [2].
Hakimiliki, madai ya jukwaa, na kuepuka matatizo ⚖️
Huu si ushauri wa kisheria, lakini haya ndiyo maeneo ya vitendo:
-
Uandishi wa kibinadamu ni muhimu. Katika sehemu nyingi, nyenzo zinazozalishwa kwa mashine pekee huenda zisistahili ulinzi wa hakimiliki bila ubunifu wa kutosha wa kibinadamu. Ofisi ya Hakimiliki ya Marekani ina mwongozo kuhusu kazi zenye nyenzo zinazozalishwa na AI na uchambuzi wa hivi karibuni kuhusu hakimiliki [1].
-
Creative Commons ni rafiki yako unapotumia tena taswira au sampuli. Angalia masharti halisi ya leseni kabla ya kutumia kitu na ufuate sheria za uainishaji [4].
-
Kitambulisho cha Maudhui cha YouTube huchanganua vipakiaji dhidi ya hifadhidata kutoka kwa wenye hakimiliki. Vinavyolingana vinaweza kusababisha vizuizi, uchumaji mapato, au ufuatiliaji, na kuna mchakato wa mzozo ulioandikwa katika Usaidizi wa YouTube [3].
-
Vimeo pia inatarajia uwe na haki za kila kitu katika upakiaji wako, ikiwa ni pamoja na muziki wa chinichini. Weka uthibitisho wako wa leseni karibu.
Unapokuwa na shaka, tumia muziki kutoka kwa majukwaa ambayo yanatoa haki za matumizi kwa waundaji, au uandike yako mwenyewe. Kwa YouTube haswa, Maktaba ya Sauti imejengwa kwa ajili hii [2].
Ifanye ionekane ghali kwa mbinu za kumalizia 💎
-
Punguza kelele kidogo, kisha noa mguso mmoja tu.
-
Ongeza umbile kwa safu laini ya chembechembe za filamu ili ulaini wa AI usionekane kama plastiki.
-
Unganisha rangi kwa kutumia LUT moja au marekebisho rahisi ya mikunjo yanayojirudia katika video nzima.
-
Ongeza ukubwa au unganisha ikiwa inahitajika. Baadhi ya jenereta za AI husafirisha kwa ubora wa chini au idadi ndogo ya fremu - fikiria wajenzi wa hali ya juu au unganishaji wa fremu baada ya kufunga uhariri.
-
Majina yasiyopiga kelele. Weka uchapaji safi, ongeza kivuli laini, na ulingane na mdundo wa maneno ya wimbo. Mambo madogo, mng'ao mkubwa.
-
Gundi ya sauti. Kishinikiza kidogo cha basi kwenye sehemu ya mbele na kidhibiti laini vinaweza kuweka vilele vikiwa laini. Usiviponde, isipokuwa kama ndivyo unavyotaka... ambavyo, wakati mwingine ndivyo vinavyofanya kazi.
Mapishi matatu yaliyo tayari kuibwa 🍱
-
Kolagi inayoongozwa na mashairi
-
Tengeneza vignette za ajabu za sekunde 3-4 kwa kila picha ya wimbo.
-
Rudia kitu cha kawaida kama mstari wa mstari, kama vile utepe unaoelea au ndege wa origami.
-
Kata ngoma za mtego na ngoma za mateke, kisha changanya kwa upole kwenye kiitikio.
-
-
Utendaji katika ndoto
-
Filamu uso wako ukiimba.
-
Tumia Wav2Lip kufunga usawazishaji wa midomo. Mchanganyiko juu ya mandharinyuma ya uhuishaji ambayo hubadilika kulingana na nishati ya wimbo [5].
-
Panga kila kitu kwa vivuli na rangi sawa ya ngozi ili kionekane sawa.
-
-
Aina ya picha + viingizo vya akili bandia
-
Jenga mashairi na maumbo ya kinetiki katika kihariri chako.
-
Kati ya sehemu za aina, dondosha klipu za AI za sekunde 2 zinazolingana na rangi.
-
Malizia kwa rangi iliyounganishwa na picha ndogo ya kina.
-
Makosa ya kawaida ya kuepuka 🙅
-
Kuhama haraka - kubadilisha mtindo mara nyingi sana ili hakuna kinachoonekana kuwa kimeunganishwa
-
Picha za muda mrefu - mabaki ya akili bandia huundwa baada ya muda, kwa hivyo iendelee kuwa ya haraka
-
Kupuuza sauti - ikiwa hariri haiingii kwenye wimbo, inaonekana kama imeharibika
-
Kuinua leseni - kutumaini Content ID haitatambua si mkakati. Itakuwa [3].
Maswali Yanayoulizwa Mara kwa Mara Yanayoweza Kuulizwa Mara kwa Mara Yanayookoa Maumivu ya Maumivu 🍪
-
Je, ninaweza kutumia wimbo maarufu chini ya matumizi ya haki? Mara chache. Matumizi ya haki ni finyu na yanategemea muktadha na hupimwa kesi kwa kesi chini ya mambo manne katika sheria ya Marekani [1].
-
Je, klipu za akili bandia zitaripotiwa? Ikiwa sauti au taswira zako zinalingana na nyenzo zenye hakimiliki, ndiyo. Weka leseni zako na uthibitisho wa haki. Nyaraka za YouTube zinaonyesha jinsi madai yanavyofanya kazi na cha kuwasilisha [3].
-
Je, ninamiliki taswira zinazozalishwa na AI? Inategemea mamlaka na kiwango cha uandishi wako wa kibinadamu. Anza na mwongozo unaobadilika wa Ofisi ya Hakimiliki ya Marekani kuhusu AI na hakimiliki [1].
TL;DR🏁
Kama hukumbuki kitu kingine chochote kuhusu Jinsi ya kutengeneza Video ya Muziki ukitumia AI , kumbuka hili: chagua lugha inayoonekana, panga midundo yako, tengeneza picha fupi zenye kusudi, kisha paka rangi na ukate hadi ihisi kama wimbo. Tumia rasilimali rasmi za leseni za muziki na sera za jukwaa ili kuepuka madai. Kilichobaki ni kucheza. Kwa kweli, hiyo ndiyo sehemu ya kufurahisha. Na ikiwa picha inaonekana ya ajabu - isherehekee au ikate. Zote mbili ni halali. Unajua jinsi ilivyo.
Bonasi: mtiririko mdogo wa kazi unaoweza kufanya usiku wa leo ⏱️
-
Chagua kiitikio na uandike vidokezo 3.
-
Tengeneza klipu tatu za sekunde 4 kwenye jenereta yako uipendayo.
-
Piga ramani ya kiitikio na alama za kushuka.
-
Kata vipande vitatu kwa mfuatano, ongeza chembe laini, safirisha nje.
-
Ikiwa unahitaji chaguo za sauti salama kwa hakimiliki au mbadala safi, fikiria Maktaba ya Sauti ya YouTube [2].
Umetuma prototype. Sasa rudia. 🎬✨
Marejeleo
[1] Ofisi ya Hakimiliki ya Marekani - Hakimiliki na Akili Bandia, Sehemu ya 2: Hakimiliki (Januari 17, 2025) : soma zaidi
[2] Usaidizi wa YouTube - Tumia muziki na athari za sauti kutoka kwa Maktaba ya Sauti : soma zaidi
[3] Usaidizi wa YouTube - Kutumia Kitambulisho cha Maudhui (madai, uchumaji mapato, migogoro): soma zaidi
[4] Creative Commons - Kuhusu Leseni za CC (muhtasari, maelezo, kichagua leseni): soma zaidi
[5] Wav2Lip - Hifadhi Rasmi ya GitHub (ACM MM 2020): soma zaidi