ウェブカムだけで顔の向き・表情を高速・高精度に追跡するアバターシステム
慶応大学が画期的なフェイシャルモーション技術を開発した。
慶應義塾大学 満倉靖恵准教授のグループは、一般的なPCとUSBカメラで、人間の顔の向きや表情の変化を高速・高精度に計測する手法を開発しました。
趣味でCGアニメーションを制作している方やWeb対話システムなどで自分の顔の代わりにこういったキャラクターを提示して対話に使うといったもの、もしくはイベントなどでキャラクターをリアルタイムに動かしたりといったことも、パソコン1台とカメラ1台用意するだけで簡単にできますので、そういったことに応用できると考えています。
顔の検出・追跡には、時系列信号処理の手法を応用し、目や鼻、口などに配置された特徴点を高速・高精度に追跡しています。画面上の白い点が顔の追跡に利用した特徴点、赤い線は顔の向きを表わしており、顔の向きや口の動きに合わせて適切に顔を検出していることが分かります。
人間の顔の動きに合わせて、アルゴリズムを逐次更新していくようなものを使用していますので、非常に高速・高精度に顔を追いかけることができるというのが、このアバターシステムの基礎となっている技術です。
さらに、表情の変形の仕方を解析することで、顔の向きだけでなく、眉や口の動き、笑い、怒り、驚きなどの表情を表現することもできます。
また、アバターとしての活用の他、人間の顔の変化を読み取って動作するゲームなどへの応用も考えられています。
顔にマーカを付けるモーションキャプチャを使ったりすると、一般の人では用意することができなかったりしますので、そういった意味ではこういったモデルをリアルタイムに自在に動かすという技術は今まで無かったものだと思います。
今後は、一般PC向けのモーション生成ソフトウェアの開発を目指すほか、さまざまな分野への応用や実装を進めていく予定です。
関連記事
未来のデッサン人形? 3Dモデルのポージングができる人型装置、ソフトイーサが開発
デッサン人形のような装置にポーズを取らせることで、コンピュータ上の3Dモデルに同じポーズを取らせることができる「QUMA」技術をソフトイーサが開発している。3D&VR展:誰でも“かめはめ波”が打てるようになった?――ARアプリ「プラーナ」初公開
3D&VR展で、厳しい修行をしていない来場者たちが“かめはめ波”を連発していた。けしからん。でもなんだかオラ、ワクワクしてきたぞ。
Copyright(c) Digitized Information, Inc. All Rights Reserved.
昨日の総合アクセスTOP10
アントニオ猪木、“リハビリ中”の現在の姿を公開 激励相次ぐ「猪木さんは不死身の漢や!」「負ける訳ないやないか」
「かまぼこになりきる猫です」 カップうどん風ベッドでくつろぐ、フワフワ猫ちゃんがかわいすぎる!
ヤマト運輸の404ページがめちゃかわ 高速シャッフルされたダンボールの中から黒猫を探すミニゲームにハマる人続出
早朝の路地裏で毎日コーヒーを分け合った女の子 思春期の出会いと別れを描いた青春漫画がほろ苦い味わい
フワちゃん、生放送での“乳首ポロリ”をガチ謝罪 立て続けの下トラブルに絶叫「マトモな人間にならせて!」
【なんて読む?】今日の難読漢字「絆される」
「爪切りはいやニャ!」と爪を隠す賢い猫ちゃん、しかし…… 飼い主の作戦に観念する漫画に共感の声
【漫画】「あの世へつながる電話番号」都市伝説を検証したら…… 小学生の好奇心が招いた“恐怖体験”の結末にゾワリ
「あなたのような作家は決して成功しないでしょうね!」 携帯漫画の黎明期にとんでもない依頼がきた漫画家の体験談がコワい
声優・三石琴乃が北川景子の母役で連ドラ初レギュラー “セラムン”ファン興奮「アニメのウサギと実写のレイちゃんだー!」
先週の総合アクセスTOP10
- 指原莉乃、すっぴんからのメイク動画が1日で100万再生を突破 「プレゼンがすごく上手くてビックリ」と高評価も続々
- お水を飲みたいカラスさんがとった行動とは……? 人間に“ある方法”でお願いするカラスが賢くてかわいい
- 菊地亜美、体調不良の原因は「赤ちゃんと同じような大きさの…」 RIZAP10キロ減から2年で襲った悲劇
- アンガ田中、「みなおか」で買わされた“高級腕時計”を披露 438万円→800万円に価値高騰で「欲しがるコレクターもたくさん」と反響
- 息子が「パパ」と言って指さしたのは……? 親子でバスに乗ったときのエピソードを描いた漫画がジワジワ面白い
- アントニオ猪木、“リハビリ中”の現在の姿を公開 激励相次ぐ「猪木さんは不死身の漢や!」「負ける訳ないやないか」
- 「綺麗で腰抜かした」「シワ少ない!!」 67歳の研ナオコ、華やかメイク動画で披露したすっぴん姿に反響
- 実家に「ねこ様元気?」と聞いた結果…… やりたい放題のお猫さまが笑ってしまうかわいさ
- 保護した子ネコに「寂しくないように」とあげたヌイグルミ お留守番後に見せた子ネコの姿に涙が出る
- インコさんが逆さまのまま「すやぁ……」 衝撃の寝相で爆睡するインコが面白かわいい
先月の総合アクセスTOP10
- 「訃報」「愛猫」「手風琴」って読める? 常用漢字表に掲載されている“難読漢字”
- 痩せたらこんなに変わるのか 丸山桂里奈、現役時代の姿が別人過ぎて「誰かわからん」の声殺到
- 保護した子ネコに「寂しくないように」とあげたヌイグルミ お留守番後に見せた子ネコの姿に涙が出る
- セーラーサターンの変身シーン、四半世紀を経てアニメ初公開にネット湧く 「ついに公式が」「感謝しかない」
- 「髪型体型全て違う」 丸山桂里奈、引退直後のセルフ写真にツッコミ 4年前のスレンダーな姿に「今も輝いててかわいい」の声も
- 鳥取砂丘から古い「ファンタグレープ」の空き缶が出土 → 情報を募った結果とても貴重なものと判明 ファンタ公式も反応
- 「マジで助けてくれ」 試験中止で教授に“リスのさんすうノート”を提出することになった大学生に爆笑
- 「140秒とは思えない満足感」「なぜこれだけの傑作が埋もれているのか」 崩壊した日本を旅する“最後の動画配信者”のショートフィルムが話題
- 「化粧! 今すぐ落としてこい!」 男性教師に怒鳴られる生徒をかばう女性教師を描いた漫画に納得と感謝の声
- 畠山愛理、いま着たらピチピチなレオタードを公開 「とんでもなく可愛い」「見惚れてしまいました」と反響