俳優の震え声まで再現！韓国AIスタートアップが開発する感情ベースの次世代吹き替え技術

■ 俳優の感情をそのまま別言語へ繋ぐAI技術の進化

映画やドラマにおいて、俳優が込めた細かな感情の揺れを別の言語で再現することは、コンテンツの現地化（ローカライズ）における最大の課題でした。韓国のAIスタートアップ企業「ハドソンAI（Hudson AI）」は、この壁を打ち破る「感情ベースの音声生成技術」を開発し、世界のコンテンツ市場で注目を集めています。

ハドソンAIのシン・ヒョンジン（신현진）代表は、自社で開発したAIソリューション『ティンバー（Timber）』を通じて、単に翻訳されたテキストを読み上げるだけではない、没入感のある吹き替えを実現しました。この技術は、音声の分離、話者の判別、感情に基づく音声生成、そして「ため息」や「声の震え」といった非言語的な表現の復元までを網羅しています。

■ スポーツ中継からドラマまで広がる活用範囲

現在、この技術は既に実用化の段階にあります。例えば、韓国プロ野球（KBO）の英語中継において、韓国語の放送信号をリアルタイムで翻訳し、メジャーリーグ（MLB）スタイルの自然な発声と抑揚で英語の吹き替えを提供しています。人による翻訳と録音では膨大な時間とコストがかかる作業を、AIによって1分以内の遅延で処理することが可能です。

シン・ヒョンジン代表は、特に「ロングテール・コンテンツ」に注目しています。大作映画などは多額の予算をかけてプロの声優による吹き替えが行われますが、中小規模のドラマや教育コンテンツ、YouTube動画などは、費用対効果の面から字幕のみに頼らざるを得ない状況がありました。AIによる効率化は、こうした多くの韓国コンテンツが言語の壁を越えて世界に流通する機会を広げると期待されています。

■ 技術的な仕組みと今後の展望

ハドソンAIの技術は、元の音声から抽出した特徴、AIが分析した感情状態、シーンの文脈プロンプト（指示文）の3つの情報を組み合わせて音声を生成します。元の俳優の声をリファレンス（参照）とし、リズムやピッチ、エネルギーを維持したまま別言語に変換するため、視聴者は違和感なく作品に集中できるようになります。

今後の課題として、AIの発展に伴う声優の仕事への影響といった倫理的・社会的な共存問題も挙げられますが、シン・ヒョンジン代表は「より多くのコンテンツを世界に届けるための補完的な役割」としての可能性を強調しています。AIによる吹き替えソフトの市場規模は、2035年には約53億7000万ドル（約8000億円）に達すると予測されており、韓国発の技術が世界のエンタメ産業のインフラを支える日も遠くないかもしれません。

出典：https://www.forbeskorea.co.kr/news/articleView.html?idxno=402073