如何製作 INMU KING 拼貼視頻
廣告使用附屬機構。
INMU KING 的舞蹈合作是透過將人物的全身圖像和舞蹈視頻放入 Viggle 中,然後使用 Filmora / CapCut 將生成的視頻與歌曲進行匹配來創建的。歌聲臉部特寫由 HeyGen 製作,附加台詞由 ElevenLabs 製作。您不必全部使用它們。如果只是跳舞,我可以使用 Viggle 和編輯軟體。
先做副歌的 8~15 秒就好。準備自己的照片、自創角色或獲准使用的素材。以下流程依各工具的官方指南整理。
舞蹈二創就照這 3 步做
- 準備角色圖片一張全身圖,加上一段作為動作來源的舞蹈影片。
- 用 Viggle 讓角色跳舞在 Mix 指定 Add Image 與 Add Motion,再生成。
- 對齊音樂並匯出在剪輯軟體關掉影片原音,對齊原曲節拍。
先試做副歌的一小段。素材準備與排隊生成另計,剪輯先抓 10~20 分鐘;Viggle 免費版有浮水印。 查看工具組合與預算 →
首先要準備的材料
全身舞蹈和僅面部對口型所需的圖像是不同的。如果您想同時創作,請準備一張同一角色的全身圖像和一張臉部特寫。
- 人的圖像對於舞蹈用途,圖像應從頭到腳覆蓋,手臂和腿不要隱藏在其他物體後面。對於口型同步,影像中的臉部應靠近前方且嘴巴清晰可見。
- 動作參考影片:您自己編排的影片或您有權使用的舞蹈素材。首先,選擇適合螢幕上一個人的短影片。
- 歌曲/音訊:可用的聲音來源。如果您想使用INMU KING作為發布目的地的音樂功能,您也可以在編輯時決定時機並在發佈時指定音樂。請檢查發布目的地的分發狀態和使用條款。
首先確定垂直影片為 9:16,水平影片為 16:9。以製作為例,如果前2秒是臉部特寫,接下來8秒是舞蹈,最後2秒是pose,那麼12秒就變成了一個流程。
與 Viggle 一起舞動你的舞蹈
Viggle 的 Mix 功能可將參考影片的動作轉換為人體影像。 編排將透過舞蹈影片而非文字形式提供。
- 登入後,開啟Mix。
- 使用新增動畫上傳參考影片。對於練習,您可以使用庫中的動作,但如果您想匹配 INMU KING 的編舞,請選擇包含這些動作的材料。
- 將全身影像新增至新增影像。在不同的剪裁中使用相同的圖像可以更容易地匹配服裝和人物的外觀。
- 檢查所選材料和使用限制並使用MIX產生。
- 在產生的結果中,檢查手在頭後面的位置、手臂交叉在臉上的位置以及腳的位置。從下載圖示儲存可用的剪輯。
首先,嘗試一個捷徑,其中包括將雙手放在腦後的編排。如果您有參考影片中臉部或身體被中間切掉的情況,請更換為其他材質並進行比較。檢查背景和人物,因為原始背景的外觀可能會改變。
操作名稱基於 Viggle 官方 Mix 說明。 官方影像準備指南在影像亮度、近正面方向和最小遮蔽方面也可能會有所幫助。
使用 HeyGen 讓臉部特寫唱歌
全身舞蹈之外,若要做角色唱副歌的臉部特寫,就用 HeyGen 的 Photo to Video,把照片配上音訊來生成嘴型與表情。
- 從首頁的照片轉影片或工具的所有應用程式中開啟對應的功能。
- 上傳您靠近正面的臉部圖像。儘管角色與全身舞蹈的角色相同,但這裡我選擇了一張可以看到嘴巴的圖像。
- 上傳您的音訊檔案。對於對話,您可以輸入文字並選擇聲音。如果您想為歌曲伴奏,請準備您想演唱的部分的可用音訊。
- 檢查所需的設定和消費積分並使用產生產生它們。
- 將張口的時間與音訊進行比較,並將完成的影片傳送到編輯軟體。
HeyGen《阿凡達 IV 官方指南》介紹瞭如何將圖像和音頻輸入到音頻中的示例示例。如果將全身編舞的準確轉移到Viggle的過程和在HeyGen中展示歌臉的過程分開,準備材料會更容易。
如果快速的歌詞或伴奏強烈的部分不適合您,請嘗試使用較短的短語。 只有口型匹配的部分會以臉部特寫的形式呈現,其餘部分透過舞蹈連接起來。 與其無休止地重新創建單個破損的剪輯,不如嘗試使用您可以使用的材料進行編輯。
使用 ElevenLabs 新增一行
如果您想在開頭添加諸如“國王已抵達”之類的簡短台詞,請使用 ElevenLabs 的文本轉語音功能將您自己的台詞製作為音頻。
- 開啟文字轉語音並輸入對話。從一句話開始。
- 選擇一個聲音並檢查日語發音和氛圍。
- 使用產生語音產生語音並收聽發音和停頓。如果數字或專有名詞未如預期讀取,請將其轉換為其發音並進行比較。
- 從生成結果和歷史下載中保存 MP3、WAV 等。
- 如果你想口型同步,就把它放入HeyGen的音訊輸入中,如果你想用它作為旁白,就把它放入編輯軟體的音軌中。
操作及閱讀注意事項請參考ElevenLabs官方文字轉語音指南。產生它會消耗使用配額,因此請在提交長稿件之前先檢查短行。
用 Filmora・CapCut 對齊歌曲與畫面
用 Filmora 對齊歌曲與畫面(桌面版)
日本 Creative Assets 的 7 天體驗若另行加入,期滿會以每月 ¥1,999 自動續訂。一般裁切、對音樂不需要買這項,結帳時分清軟體與素材訂閱。
把 Viggle 舞蹈、HeyGen 對嘴和要用的音軌放在同一資料夾,以下稱為 dance.mp4、lip.mp4、song.wav。先剪一小段副歌,別一上來就包辦整場加冕式。
- 開啟「新建專案」。直式短片選 9:16,橫式選 16:9。在媒體區用「匯入」加入 dance.mp4、lip.mp4、song.wav,剪輯期間不要移動或重新命名原始檔案。
- 把 dance.mp4 拖到上方視訊軌,song.wav 放到下方音訊軌。在要用的歌曲段落開頭選取音訊片段,按右鍵→「分割」;結尾再分割一次,只刪掉前後不要的音訊,把留下的段落移到時間軸 0 秒。
- 把影片原聲靜音,避免同一首歌播兩次。在 dance.mp4 按右鍵→「靜音」。lip.mp4 若也用獨立音軌,同樣靜音。播放一次,確認只聽到一份歌曲。
- 歌曲固定,只移動影片。選一個清楚的動作和拍點,例如雙手舉到頭後的瞬間。放大時間軸,拖動整段影片:動作太早就往右,太晚就往左,再播放前後幾秒確認。
- 只在需要對嘴特寫的地方,把 lip.mp4 放到舞蹈上方另一條視訊軌。上層會蓋住舞蹈,將它在目標歌詞前後分割並刪去多餘部分。對齊送入 HeyGen 的同一段音訊,確認張嘴時機;名字連呼、主歌或其他句子都能用這個方式剪。
- 不只看開頭,中段和結尾也要播放。偏移量固定就移動影片;越後面越歪,別把短片硬拉成整首歌,改成按相同歌詞與音源切成短段再對齊。也檢查頭尾是否留下黑畫面。
- 儲存專案,再從「匯出」輸出本機 MP4。1080p 可選橫式 1920×1080、直式 1080×1920,影格率配合原始素材。設定名稱與位置後匯出,再開啟 MP4,確認畫面、聲音和片尾。只存專案並不等於做好可投稿的影片。
CapCut
要不額外付款匯出,就用自有素材、基本剪輯與 1080p;避開 Pro 素材、付費 AI 功能,有片尾 Logo 片段就刪掉。Viggle 原本的浮水印仍會留下。 CapCut
把素材匯入 CapCut 桌面版。影片與歌曲放在不同軌道,以歌曲為準調整影片的位置。其他熟悉的剪輯軟體也能照這個流程。
- 建立一個新專案並從匯入匯入舞蹈影片、臉部特寫和音訊。
- 將影片放在時間軸上,並將歌曲的音訊放在其下方。如果原始影片包含不必要的聲音,請降低影片的音量。
- 決定一個匹配位置,例如合唱的開頭。放大音訊波形並將舞蹈開始位置移動到節拍發生的位置。
- 從正面和背面剪掉不需要的部分。使用口型同步影片時,請確保產生的音訊和編輯側的音訊在同一起始位置對齊,以免出現偏差。
- 如果添加字幕,請將其放置在不會遮住臉部或手部動作的位置。檢查即使在智慧型手機上顯示較小的情況下是否也可以讀取。
- 從匯出匯出。第一次檢查時,請使用 1080p/MP4 作為指導,並根據來源材料選擇幀速率。
有關載入素材、排列曲目和導出的信息,請參閱CapCut 視訊和音訊合併官方流程。
出現問題時進行審查的地方
- 改變你的臉:透過只使用人物的一張圖片並避免隱藏臉孔的參考影片來比較快捷方式。
- 手或手臂變形:不只看手繞到頭後的瞬間,也要檢查前後。仍然變形的鏡頭,換成其他姿勢或臉部特寫。
- 舞蹈與歌曲不同步:先移動影片的起點。還是對不上,再微調影片速度,口型鏡頭另行處理。
- 唇形不同步:檢查傳遞到產生的音訊和用於編輯的音訊是否相同,以及是否在一側消除了開頭的靜音。
- 垂直影片中的手被剪掉:不要在匯出前剪掉,在選擇素材時從一開始就注意垂直視角。
重做時,圖片、參考影片、剪輯三者只改一項。全部一起改,就不知道問題出在哪。
匯出前確認
請選擇您習慣使用的人物影像、參考影片和聲音來源資料。使用真人時,請確認該人的同意,並避免以可能被誤解為該人的言語或外表的方式呈現。使用您自己的錄音或可用的音頻,未經許可請勿複製他人的聲音。發文時,請附上說明,明確這是AI合成,並檢查發文目的地的規則和音源的使用條款。
儲存影片後,請在智慧型手機上播放直至結束。發布前檢查音量是否突然變化、字幕被截斷、結尾黑屏或圖像扭曲。付費方案的產生框架和輸出條件會發生變化,因此請在開始製作當天檢查各服務的畫面。
官方程式/相關文章
上述每個步驟都有一個確認操作的官方文件的連結。確認日期為2026年10月11日。