AI用語集 / Lip-sync
🎨 画像・動画・音声
Lip-sync
動画内の人物の口の動きを、任意の音声トラックに合わせます。
AIにおけるリップシンクとは、動画内の人物の口の動きを、後から加えた音声に自動で合わせる技術です。モデルが音声を分析し、口元(多くの場合は表情全体も)を調整して、人物が実際にその言葉を話しているように見せます。 これは、新しい世代の吹き替えを支える技術です。俳優の口の動きを保ったまま、映画を別の言語で「話させる」ことができます。また、講座やマーケティング向けの会話型アバターにも使われます。音声クローニングと組み合わせれば、合成話者を一式そろえられますが、そこには利点とリスクの両方があります。