嘴型逐字對齊

AI對嘴

給 ClipNova 一張臉和要說的話:你自己的錄音,或一段輸入的腳本。它會讓這張臉動起來,嘴唇、頭部和表情都跟著語音走。影片已經拍好了?把它對嘴成另一種語言。

適用於
深受創作者信賴
遍及全球
AI對嘴圖片
運作方式

輸入一張臉和一段聲音, 輸出一支會說話的影片。

前三步在 AI 會說話的虛擬人物工具中完成,第四步在 AI影片翻譯中完成。下面跟著同一位主講人,從一張靜態照片到一支對好嘴型的影片。

  1. AI對嘴圖片 — 被選作動畫人臉的主講人正面肖像
    — 01 —
    人臉

    從一張人臉照片開始

    從素材庫中選擇虛擬人物,根據描述生成新的肖像,或上傳你自己的照片。正臉、清晰、光線充足的人臉,嘴部動作最自然。

  2. AI對嘴圖片 — 一段上傳的語音錄音和一段輸入的腳本,為人臉提供台詞的兩種方式
    — 02 —
    音訊

    上傳錄音,或輸入腳本

    上傳一段語音,這張臉就會用你的聲音一字不差地說出來。也可以輸入腳本,選一個 ClipNova 聲音來朗讀。你還可以把人物放到新背景中,並選擇 16:9、9:16 或 1:1 畫面比例。

  3. AI對嘴圖片 — 主講人已在影片播放器中開口說話,畫面下方是語音波形
    — 03 —
    同步

    嘴唇、頭部和表情跟著語音走

    Kling AI Avatar v2(Base 和 Pro)或 OmniHuman(Ultra)依音訊驅動照片:嘴型對上每個音,頭部和臉部像真人說話一樣自然活動。較長的語音會被拆成多個對好嘴型的片段,再接成一支影片。

  4. AI對嘴圖片 — 英文原影片畫面與同一畫面對嘴成西班牙語後的對比
    — 04 —
    已經拍好了?

    把影片對嘴成另一種語言

    把 2 到 60 秒的說話影片上傳到 AI影片翻譯。它會用說話者自己的聲音配音成 18 種語言之一,再由 lipsync-2 在你的原始畫面上重繪嘴部,讓嘴型與新台詞吻合。

為什麼看起來真實

對嘴不只是 動動嘴。

只動下巴的對嘴,一秒鐘就會露餡。人會讀臉:發 M 或 O 時的唇形,句尾的一個點頭,始終注視著觀眾的眼睛。ClipNova 使用會說話的虛擬人物模型,依音訊驅動整張臉,而不只是嘴巴。

台詞怎麼來由你決定。語氣表達很重要時,就上傳自己的錄音;或者輸入腳本,讓 ClipNova 的聲音來唸。無論哪種方式,節奏都來自音訊,嘴唇能對上每一個音節。

對於現有的素材,AI影片翻譯反過來運作:保留你的畫面,用說話者自己的聲音把語音配成另一種語言,再重新對齊嘴型。不必重拍,影片看起來依然是你的影片。

適用於

任何一張臉, 任何一段話

廣告與 UGC

不用拍攝的代言人影片

把產品腳本變成 9:16 直式、對著鏡頭講解的主講人影片,直接發 Reels 和 TikTok。

創作者

給不露臉頻道一張臉

不用自己入鏡,也能為旁白配上一位固定的出鏡主持人。

培訓與客服

有真人面孔的講解影片

把說明中心文稿和新手引導步驟變成簡短的口說影片。

在地化

同一支影片,換一種語言

把現有的說話影片重新對嘴到保留說話者聲音的翻譯配音上。

AI對嘴 常見問題

什麼是 AI對嘴?+

AI對嘴是讓人臉的嘴部動作與一段語音相符。在 ClipNova 中,你可以讓一張照片動起來說出你的音訊或腳本,也可以把說話影片重新對嘴到所說內容的譯文上。

可以用我自己的音訊幫照片對嘴嗎?+

可以。在 AI 會說話的虛擬人物工具中選擇或上傳一張臉,然後上傳你的語音片段,而不是輸入腳本。影片會逐字跟著你的錄音。

可以幫已經拍好的影片對嘴嗎?+

可以,對嘴成另一種語言。AI影片翻譯會用說話者自己的聲音,把 2 到 60 秒的說話影片配音成 18 種語言之一,再讓原始畫面中的嘴型對上新台詞。

使用了哪些模型?+

虛擬人物說話影片在 Base 和 Pro 等級使用 Kling AI Avatar v2,在 Ultra 等級使用 OmniHuman。影片翻譯先用 ElevenLabs 配音,再用 lipsync-2 模型對嘴。

什麼樣的來源照片或影片效果最好?+

畫面中只有一個人,臉部可見並朝向鏡頭,光線均勻、畫面清晰。沒有背景音樂疊加的乾淨語音,嘴型最準確。

可以匯出哪些畫面比例?+

虛擬人物說話影片可以做成 16:9、9:16 或 1:1,也可以沿用照片本身的比例。翻譯後的影片保留你上傳片段的格式。

費用是多少?+

對嘴影片包含在所有付費方案中,每月 $19 起,每個方案都附帶完整的商業使用權。每支影片的費用會在生成前以點數顯示。

今天就開始創作

一張臉,一個聲音, 就夠了。

加入把想法變成讓人停下滑動的影片的創作者行列,無需團隊、無需軟體、無需學習成本。

製作對嘴影片