Deepdubは俳優の演技を長編AI吹き替えに変えた

ラテンアメリカにおける従来の吹き替えは、翻訳者、声優、音響ミキシング、スタジオに依存していた。俳優は文化的・マーケティング上の価値も担っていた。ファンはその声を追いかけ、現地でのアドリブが作品と観客をつないでいた。したがってAI吹き替えは効率化を約束する一方で、雇用と中立スペイン語のアイデンティティを脅かすものだった。

Deepdubは実際の演技から合成音声を構築することを選んだ。俳優は多様なスタイルとトーンで数千語および個々の文字を録音し、コーチがシステムにアクセントと感情を学習させるのを助けた。この決定により、人間の演技が自動化製品の原材料かつ訓練プロセスとなった。

技術的な実証となったのは、2019年の米国製スリラー『Every Time I Die』であり、DeepdubはAIを用いてスペイン語に吹き替えた最初の企業となった。同社は、制作会社が翻訳者、俳優、ミキシング、スタジオの代わりにAI音声へ支払うことで、ローカライズをより速く安価にできると主張した。記事のファクトボックスには2000万ドルのシリーズAが記載されている。

この移行は現実のものだったが、議論も呼んだ。視聴者は質の低い合成吹き替えを批判し、俳優は同意と報酬に疑問を呈し、一部の制作会社は依然として人間を選んだ。『オビ＝ワン・ケノービ』のラテンアメリカ・スペイン語版では、英語版のダース・ベイダーの声がAI生成だったにもかかわらず、セバスティアン・リャプルが起用された。

Deepdubはスペイン語への初の長編AI吹き替えを実現し、より速く安価なローカライズを提供した。記事のファクトボックスには2000万ドルのシリーズAが記載されている。

吹き替えには高コストな人間の工程が複数必要だったため、再現可能な合成音声は限界費用の低下を約束した。

実際の俳優が、単純な自動化では容易に再現できないアクセント、トーン、感情の幅を提供した。

中立スペイン語は国境を越えた大規模な観客に届くため、1つのAI出力に広い潜在市場を与えた。

エンドツーエンドの長編吹き替えは、スタジオや配給会社にとって具体的な実証となった。

自動化は、困難な人間の技を訓練データに変換し、エンドツーエンドのワークフローを実証したときに信頼を得るが、採用は依然として同意、品質、観客の信頼にかかっている。

Deepdubと同業他社は映画、テレビ、ノンフィクションを狙い続ける一方、俳優は自分たちを置き換えるかもしれないシステムを訓練し続けた。長編作品の公開は技術的な閾値を越えたが、視聴者は依然として品質を判断し、権利の取り決めも争われたままで、商業的な移行は未完了のままである。