ニュース

俳優の声をそのまま吹き替え音声に リアルタイムの翻訳&音声再生技術「BabelOn」が開発に向け支援を募集中

音声のデータ収集と分析・機械学習による音声合成技術です。

advertisement

 話した言葉を翻訳し、さらにその人の声のまま別の言語で再生する技術「BabelOn」が、クラウドファンディングサイトIndiegogoにて資金を募っています。これが実用化されれば、世界中のテレビ番組を吹き替えで見られるかも?

自由に言語を切り替えて吹き替え再生できる日がくる?

 説明によるとBabelOnは、特許取得済みの音声・言語合成技術を使ったリアルタイムの翻訳音声再生技術で、さらにそれぞれの人の声の個性を再現可能だとしています。使用される場として、俳優の声をそのまま吹き替え音声として使える映画や、ミュージシャンの声が他の言語で再生される音楽など、未来的な例が挙げられています。

何を話しているか、ではなくどう話しているかを再現(Indiegogoより)

 仕組みとしては、声をさまざまな言語に変換して映像などに合成するソフトウェアの他、それぞれの人が読み上げる声をキャプチャーするハードウェアでできていて、BLIP(BabelOn Language Information Profile)と呼ぶ個人のさまざまな感情の声をサンプリングしたデータを使用。これには視覚的な情報も含まれ、顔の動きなども吹き替えの際に参考にされるとのことです。

advertisement

 なお、BLIPのデータはその個人によって管理でき、詐欺などに使われないよう高度な安全技術で保管されるとしています。

 初期段階では英語、フランス語、スペイン語、ドイツ語、ポルトガル語、北京語、日本語、ヒンディー語に絞って開発が進められ、その後は使われているすべての言語に加え、現在絶滅の危機にある言語の研究・保存も行われる予定です。

 それぞれの製作現場や業界向けの技術ですが、今回の一般向けの支援募集では11ドル(約1200円)から支援コースが選べ、「BabelOnを使った最初の曲のMP3」やオリジナルの「声紋Tシャツ」など不思議な特典に、開発の進歩状況を知らせるニュースレターが届く特典が用意されています。

(宮原れい)

Copyright © ITmedia, Inc. All Rights Reserved.

記事ランキング

  1. 巨大深海魚のぶっとい毒針に刺され5時間後、体がとんでもないことに……衝撃の経過報告に大反響 2024年に読まれた生き物記事トップ5
  2. ryuchellさん姉、母が亡くなったと報告 2024年春に病気発覚 「ママの向かった場所には世界一会いたかった人がいる」
  3. 【ハードオフ】2750円のジャンク品を持ち帰ったら…… まさかの展開に驚がく「これがジャンクの醍醐味のひとつ」
  4. 巨大深海魚のぶっとい毒針に刺され5時間後、体がとんでもないことに…… 衝撃の経過報告に「死なないで」
  5. 「どういうことなの!?」 ハードオフで13万円で売っていたまさかの“希少品”に反響「すげえ値段ついてるなあ」 
  6. 「脳がバグる」 ←昼間の夫婦の姿 夜の夫婦の姿→ あまりの激変ぶりと騙される姿に「三度見くらいした……」「まさか」
  7. 「衝撃すぎ」 NHK紅白歌合戦に41年ぶり出演のグループ→歌唱シーンに若年層から驚きの声 「てっきり……」
  8. 知らない番号から電話→AIに応対させたら…… 通話相手も驚がくした最新技術に「ほんとこれ便利」「ちょっと可愛くて草」
  9. 【今日の難読漢字】「手水」←何と読む?
  10. 「見間違いかと思った」 紅白歌合戦「ディズニー企画」で起きた“衝撃シーン”に騒然「笑った」「腹痛い」