VEED Dubbingをfal.aiでテスト：音声クローンとリップシンク

👁 112閲覧数

VEEDは2026年10月28日、動画の吹き替えモデル「VEED Dubbing」を発表し、同日fal.aiのAPIで公開しました。動画の音声を別の言語に翻訳し、話者の声をクローンして、口の動きを新しい言語に合わせます。料金は入力動画1秒あたりStandardが0.11ドル、Proが0.18ドルで、翻訳先には日本語（ja）も含まれます。私は発表当日に、英語とポーランド語の5秒動画2本で計3回処理しました（費用は料金表ベースで約2.4ドル）。翻訳の正確さではProがはっきり上で、Standardには元の英語が残りました。日本語への吹き替えはまだ試していません。

StandardとProの違い：言語数、料金、細かい設定

モデルは入力言語を自動検出しますが、手動で指定することもできます。最大1,000件の用語リストに登録すれば、ブランド名や人名が勝手に訳されるのを防げます。falの説明によると、音声クローンの強さを上げるほど元の声質やアクセントが多く残り、下げるほど新しい言語で自然な響きになります。

テスト結果：Proは自然に訳し、Standardは英語が混ざった

事前にAIで生成した5秒の音声を2本使いました。1本目は、バリスタが英語で「Your flat white is ready. Enjoy it.」と話す音声です。2本目は、テーブルに座った女性がポーランド語の有名な早口言葉を使って「W Szczebrzeszynie chrząszcz brzmi w trzcinie, a ja płacę 32 złote」（シュチェブジェシンではコガネムシが葦の中で鳴く、そして私は32ズウォティ払う）と話す音声です。出力はWhisperで文字に起こし、耳だけで判断しないようにしました。

Proは各動画を48～62秒で処理し、Standardは75秒かかりました。映像を見ると、モデルは口元を加工し、顔や背景、照明はそのまま保っていました。5秒の動画だけでは、長い発話でのリップシンクまでは評価できません。

音声を聴いてみる

英語の元音声：

VEED Dubbing Pro、ポーランド語：

VEED Dubbing Standard、ポーランド語：

ポーランド語の元音声と、VEED Dubbing Proによる英語音声：

使う前に知っておきたい注意点

• 仕事で使うならProを。今回のテストではStandardの出力に英語が残りました。短い動画1本での結果ですが、広告や商品説明で同じことが起きれば、料金差以上の損失になります。
• 音声トラックが必要です。falのドキュメントにあるサンプルファイルには音声がなく、APIに拒否されました。
• 料金は入力動画の秒数に応じて発生します。10分の動画をProで処理すると108 USDです。まず短い部分で試してください。
• 固有名詞は用語リストに追加してください。今回は地名「Szczebrzeszyn」を登録しなかったため、モデルは発音どおりに綴りました。
• 声のクローンを作る相手に配慮してください。モデルは録画内の人物の声をクローンします。権利を持つ録音を使い、本人の同意を得たうえで利用してください。

APIを使わないアプリを含むAI吹き替えの方法は、AI吹き替え：声を保ったまま動画を翻訳する方法で比較しています。動画生成の料金比較はAI動画10秒の料金比較をご覧ください。

出典と確認日

• fal.ai：VEED Dubbing Pro（説明、料金、仕様）
• fal.ai：VEED Dubbing Pro APIドキュメント（対応言語、用語リスト、音声クローンの強さ）
• fal.ai：VEED Dubbing Standard
• VEEDのX投稿、2026年10月28日
• falのX投稿、2026年10月28日

テスト：2026年10月28日、fal.ai、初期設定（音声クローンの強さ7）、料金表ベースの費用は約2.4ドル。2026年10月30日に確認。

// 続きを読むElevenLabsのAI音声クローン：10秒・2分の音声で精度を比較ベンチマークEleven Musicの使い方と料金、歌詞の再現度を検証ベンチマークElevenLabsの効果音生成を検証：多言語プロンプトを比較ベンチマーク