話している動画をアップロードして言語を選ぶだけ。ClipNovaが発話を翻訳し、話し手それぞれを本人の声で吹き替え、音楽や背景音はそのまま残したうえで、口の動きを新しい言葉に合わせます。
同じクリップを各ステップで追ってみましょう。英語で撮影したシェフの動画を、本人の声と口の動きのままスペイン語に翻訳します。
MP4、MOV、WEBM形式で、最大200MB。明るい場所でカメラに向かって話す1人の映像がもっともきれいに仕上がりますが、複数人が話すクリップにも対応しています。
対応言語は18言語:英語、スペイン語、フランス語、ドイツ語、イタリア語、ポルトガル語、ロシア語、日本語、韓国語、中国語(標準語)、アラビア語、ヒンディー語、インドネシア語、オランダ語、ポーランド語、トルコ語、ベトナム語、スウェーデン語。クリップのクレジットは最初に確保され、処理で使われなかった分はあなたに戻ります。
ElevenLabsの吹き替えが発話をほかの音から分離して翻訳し、話し手それぞれを本人の声のクローンで、元のタイミングどおりに吹き替えます。そのあと音楽と背景音を戻してミックスするので、クリップのほかの部分は何も変わりません。
リップシンクモデル(lipsync-2)が元の映像の口元を描き直し、翻訳された音声に合わせます。同じ構図、同じ声、新しい言語のMP4が1本ダウンロードできます。
多くの動画翻訳ツールは字幕で終わるか、話し手を本人とはまったく似ていない既成の声に置き換えてしまいます。ClipNovaのAI動画翻訳は人そのものを残します。話し手それぞれを本人の声のクローンで、元のテイクと同じタイミングで吹き替えます。
サウンドトラックのほかの部分も残ります。音楽、部屋の空気感、効果音は吹き替えの前に発話から分離され、吹き替え後に戻してミックスされるので、翻訳したクリップも撮影したときと同じように聞こえます。
吹き替えを自然に見せるのが最後のステップです。元の映像の口元を翻訳された言葉に合わせてリップシンクします。撮り直しも、声優も、編集者も不要。1回のアップロードで、届けたいすべての市場向けのバージョンが手に入ります。
人気のReels、Shorts、TikTokを、自分の声のままスペイン語、ポルトガル語、ヒンディー語で公開。
同じUGC広告や創業者の広告を、撮り直さずにすべての市場で配信。
短いレッスン動画やオンボーディング動画を、講師の声はそのままに翻訳。
2人以上が話すクリップも、一人ひとりを本人の声で吹き替えます。
ある言語で撮影した動画を、別の言語の同じ動画に変えます。ClipNovaは発話を翻訳し、話し手本人の声で吹き替え、背景の音を残したまま、口の動きを新しい言葉に合わせます。
18言語です:英語、スペイン語、フランス語、ドイツ語、イタリア語、ポルトガル語、ロシア語、日本語、韓国語、中国語(標準語)、アラビア語、ヒンディー語、インドネシア語、オランダ語、ポーランド語、トルコ語、ベトナム語、スウェーデン語。
はい。声を選ぶ必要はありません。ElevenLabsの吹き替えが話し手それぞれを本人の声のクローンで吹き替えるので、翻訳後の動画も本人の声に聞こえます。
はい。発話を音楽や環境音から分離して翻訳し、新しい声の下に背景音を戻してミックスします。
1クリップあたり2〜60秒、MP4、MOV、WEBM形式で最大200MBです。長い動画は分割して翻訳してください。
はい。話し手それぞれが本人の声で吹き替えられます。もっともきれいなリップシンクのためには、顔が見えていて、明るく、カメラのほうを向いていることが理想です。
動画翻訳はすべての有料プランに含まれており、月額$19からご利用いただけます。クリップのクレジットは処理の前に確保され、使われなかった分は残高に戻ります。