セリフに合わせ口の動きや表情を自動生成――セガ「Magical VEngine」
セガは、3D CGアニメーションなどでセリフに合わせた口や表情を自動作成するフェイシャルアニメーション用プラグイン「Magical VEngine」のプライベートカンファレンスを開催し、Magical VEngineの詳細な仕様を解説した。
セガが開発した「Magical VEngine」は、3D CGにおけるフェイシャルアニメーションの作成を大幅に省力化するためのプラグインだ。
一般的に、3D CGでキャラクターがしゃべっているアニメーションを作成する場合、そのキャラクターの顔の3Dモデルを用意し、セリフのタイミングに合わせて口の動きや表情を手作業で付けていく必要がある。そのため、3D CGムービー作成にはかなりの労力や時間がかかってしまう。
それに対しMagical VEngineを利用すれば、しゃべらせたいキャラクターの口や表情のパターンを数種類用意しておくだけで、セリフに合わせて自動的に口の動きや顔の表情が作成される。これにより、3D CGムービーの作成が大幅に省力化されるとともに、制作時間も大幅に短縮できるとしている。
Magical VEngineを利用したフェイシャルアニメーション作成の流れは次の通り。まず、しゃべらせたいキャラクターの顔の標準となる3Dモデル(表情なし)を用意するとともに、母音(あ、い、う、え、お)発音時のモデルをデータベースとして用意する。次に、そのキャラクターにしゃべらせたいセリフを録音した音声ファイルを指定。そして、アニメーション作成ボタンを押すだけで、その音声ファイルが自動的に解析され、音声に合わせて口の動きや表情のアニメーションが自動的に作成される。つまり、最低6つの表情モデルを用意するだけで、自動的にフェイシャルアニメーションが作成されるのである。
より自然なアニメーションを作成するには、母音だけでなく子音発声時のモデルを用意するなど、より多くのモデルを用意した方がいいようだが、それでも最低たった6つの表情モデルを用意し、音声を指定するだけで自動的にフェイシャルアニメーションが作成されるというのは、かなり驚きだ。
また、自動生成されるのは口の動きだけでなく、目や眉の動き、まばたきなども含まれる。さらに、音声から「怒り」、「悲しみ」、「喜び」、「驚き」といった感情を読み取り、その感情に応じた表情までも自動的に作成することも可能となっている。
しかも、この一連の作業は非常に短時間に完了する。今回開催されたプライベートカンファレンスでは、実際に人間の顔の3Dモデルを用意し、8文字程度のセリフの入った音声ファイルを利用したフェイシャルアニメーション作成のデモが行われたが、アニメーション作成ボタンをクリックしてアニメーションが作成されるまでにわずか1秒ほどしかかかっていなかった。もちろん、口の動きはセリフにピッタリ合っており、違和感もかなり少なかった。
実際には、一部セリフと口の形が合っていない部分もあった。音声の解析自体は精度が70〜80%ほどだそうで、場合によっては修正が必要な場合もある。しかしそういった場合でも、合っていない部分に正しい発音モデルを指定していくだけと、非常に簡単に修正できるようにもなっている。
さらに、利用できる言語が特定されていないという点も大きな特徴だ。カンファレンスでは、日本語、英語、スペイン語を利用したフェイシャルアニメーション作成のデモが行われたが、基本的に利用する言語に制限はない。しかも、各言語ごとに言語を学習させる必要がなく、データベースとなる表情モデルも、多くを他言語間で流用可能となっている。例えば、同じ表情モデルで、日本語・英語双方の音声でフェイシャルアニメーションを作成できるのである。
このように、Magical VEngineを利用することで、従来まではCGクリエイターが発音に合わせて手作業でフェイシャルアニメーションを作成する必要があったのが、かなりの部分が自動で作成されるようになり、省力化と時間短縮が可能になるというわけだ。
そして、このMagical VEngineは、実際のゲーム開発の場でもすでに利用されている。セガでは、「ファンタシースターユニバース イルミナスの野望」や「ファンタシースターポータブル」、「戦場のヴァルキュリア」、「龍が如く」シリーズなどで採用しているそうだが、それ以前までのムービー作成と比較して、作業時間が大幅に短縮できたそうだ。
Magical VEngineは、我々ゲームプレイヤーにとって直接関係のあるツールというわけではない。とはいえ、短時間でクオリティの高いフェイシャルアニメーションが作成できるようになるということは、ソフト開発にかかる時間も短縮されるわけで、ひいては早く手元にゲームが届くようになると考えると、開発者だけでなくプレイヤーにとっても利益をもたらすツールであると考えていいだろう。
プレイステーション 3やXbox 360の登場以降、ゲーム開発に時間やコストがかかるようになっているが、こういったツールの登場によって開発の省力化や時間短縮、コスト削減が実現され、クオリティの高いゲームが続々登場するようになることを期待したい。
このMagical VEngineは、「Autodesk Maya」、「Autodesk 3dsMax」、「SOFTIMAGE|XSI」に対応するプラグインとして提供される。価格は20万7000円(2008年3月末までは15万5400円)で、ボーンデジタルから発売されている。
Copyright © ITmedia, Inc. All Rights Reserved.
-
「今までなんで使わなかったのか」 ワークマンの「アルミ帽子」が暑さ対策に最強だった 「めっちゃ涼しー」
-
お風呂の“追いだき配管”を掃除してみたら…… エグすぎる光景に悲鳴の嵐 「画面越しに臭うレベル」「みそ汁作ってんか?」
-
【今日の計算】「13×4+8−1」を計算せよ
-
泣いていた赤ちゃん、パパが帰宅すると…… 「疲れが吹っ飛びますね」「こっちまで癒されました」180度変わる表情にパパ大喜び
-
「歩きスマホ」をする男性→池に落ちるかと思いきや…… “まさかの展開”となるドッキリに公園中が驚き9400万再生【海外】
-
飼い主「お尻にうんち付いてるよ」猫「付いてないよ!」 完全に言い合いする姿に「猛抗議w」「お話ししてますね」
-
アパレルブランドの女性ディレクターが「しまむら」コーデに挑戦すると…… おしゃれな高見えに「最高企画」「買い物の神様」
-
「そっち使うの?!」「これは天才」 さびだらけの鉄くぎをぐつぐつ煮込むと……? DIYに役立つ“まさかの使い道”が200万再生
-
水槽に庭で引っこ抜いた草を入れたら、まさかの変化 生まれ変わった水景に「あの雑草水槽からこの水景、、普通にすごい」
-
【今日の計算】「2+7×9−3」を計算せよ
- 釣りに行こうとしたら、海岸に子猫が打ち上げられていて…… 保護後、予想だにしない展開に「神様降臨」「涙が止まりません」
- 身長174センチの女性アイドルに「ここは女性専用車両です!!!」 電車内で突如怒られ「声か、、、」と嘆き 「理不尽すぎる」と反響の声
- しぶとい雑草“ドクダミ”を生やさない超簡単な方法が115万再生! 除草剤を使わない画期的な対策に「スゴイ発見」
- 天井裏から変な音がする→スマホを突っ込んで撮影したら…… 映った“とんでもねぇ”モノに「恐ろしい」「何これ」と騒然の196万表示!
- 小1娘、ペンギンの卵を楽しみに育ててみたら…… 期待を裏切る生き物の爆誕に「声出して笑ってしまったw」「反応がめちゃくちゃ可愛い」
- 誰も教えてくれなかった“裁縫の裏ワザ”が目からウロコ 200万再生のライフハックに「画期的」と称賛【海外】
- 「電車の中で見ちゃダメ」「笑ったww」 実家からLINE「子ヤギがすばしっこくて捕まらない」→送られてきた衝撃姿が320万表示!
- 顔の半分は童顔メイク、もう半分の仕上がりに驚がく 同一人物と思えない半顔メイクが860万再生「凄いねメイクの力」
- 元「AKB48」メンバー、整形に250万円の近影に驚きの声「整形しすぎてて原型なくなっててびびった」
- スーパーで買ったレモンの種が1年後…… まさかの結果が635万再生「さっそくやってみます」「すごーい!」「手品みたい」
- 庭に植えて大後悔した“悪魔の木”を自称ポンコツ主婦が伐採したら…… 恐怖のラストに「ゾッとした」「驚愕すぎて笑っちゃいましたw」
- 小1娘、ペンギンの卵を楽しみに育ててみたら…… 期待を裏切る生き物の爆誕に「声出して笑ってしまったw」「反応がめちゃくちゃ可愛い」
- 生後2カ月の赤ちゃんにママが話しかけると、次の瞬間かわいすぎる反応が! 「天使」「なんか泣けてきた」と癒やされた人続出
- 「歩行も困難…言動もままならず」黒沢年雄、妻・街田リーヌの病状明かす 介護施設入所も「急激に壊れていく…」
- 車検に出した軽トラの荷台に乗っていた生後3日の子猫、保護して育てた3年後…… 驚きの現在に大反響「天使が女神に」「目眩が」
- 「虎に翼」、新キャラの俳優に注目が集まる 「綺麗な人だね」「まさか日本のドラマでお目にかかれるとは!」
- 釣りに行こうとしたら、海岸に子猫が打ち上げられていて…… 保護後、予想だにしない展開に「神様降臨」「涙が止まりません」
- 身長174センチの女性アイドルに「ここは女性専用車両です!!!」 電車内で突如怒られ「声か、、、」と嘆き 「理不尽すぎる」と反響の声
- 築152年の古民家にある、ジャングル化した水路を掃除したら…… 現れた驚きの光景に「腰が抜けました」「ビックリ!」「先代の方々が」
- 「葬送のフリーレン」ユーベルのコスプレがまるで実写版 「ジト目が完璧」と27万いいねの好評