ウェブカムだけで顔の向き・表情を高速・高精度に追跡するアバターシステム
慶応大学が画期的なフェイシャルモーション技術を開発した。
慶應義塾大学 満倉靖恵准教授のグループは、一般的なPCとUSBカメラで、人間の顔の向きや表情の変化を高速・高精度に計測する手法を開発しました。
趣味でCGアニメーションを制作している方やWeb対話システムなどで自分の顔の代わりにこういったキャラクターを提示して対話に使うといったもの、もしくはイベントなどでキャラクターをリアルタイムに動かしたりといったことも、パソコン1台とカメラ1台用意するだけで簡単にできますので、そういったことに応用できると考えています。
顔の検出・追跡には、時系列信号処理の手法を応用し、目や鼻、口などに配置された特徴点を高速・高精度に追跡しています。画面上の白い点が顔の追跡に利用した特徴点、赤い線は顔の向きを表わしており、顔の向きや口の動きに合わせて適切に顔を検出していることが分かります。
人間の顔の動きに合わせて、アルゴリズムを逐次更新していくようなものを使用していますので、非常に高速・高精度に顔を追いかけることができるというのが、このアバターシステムの基礎となっている技術です。
さらに、表情の変形の仕方を解析することで、顔の向きだけでなく、眉や口の動き、笑い、怒り、驚きなどの表情を表現することもできます。
また、アバターとしての活用の他、人間の顔の変化を読み取って動作するゲームなどへの応用も考えられています。
顔にマーカを付けるモーションキャプチャを使ったりすると、一般の人では用意することができなかったりしますので、そういった意味ではこういったモデルをリアルタイムに自在に動かすという技術は今まで無かったものだと思います。
今後は、一般PC向けのモーション生成ソフトウェアの開発を目指すほか、さまざまな分野への応用や実装を進めていく予定です。
関連記事
未来のデッサン人形? 3Dモデルのポージングができる人型装置、ソフトイーサが開発
デッサン人形のような装置にポーズを取らせることで、コンピュータ上の3Dモデルに同じポーズを取らせることができる「QUMA」技術をソフトイーサが開発している。3D&VR展:誰でも“かめはめ波”が打てるようになった?――ARアプリ「プラーナ」初公開
3D&VR展で、厳しい修行をしていない来場者たちが“かめはめ波”を連発していた。けしからん。でもなんだかオラ、ワクワクしてきたぞ。
Copyright(c) Digitized Information, Inc. All Rights Reserved.
昨日の総合アクセスTOP10
「訃報」「愛猫」「手風琴」って読める? 常用漢字表に掲載されている“難読漢字”
“東大王”鈴木光が『CanCam』デビュー “美しすぎる東大生”の新たな一面
筑波大学、合計20トンの食料を学生に支援 想像を超えるクソデカ配給に「笑うしかない」とうれしい悲鳴も
「絵にしか見えないガンプラ」に頭がバグる! アニメ塗りのユニコーンガンダムがまるで合成写真
「えっ!? おきゃくさまっ!」 スターバックスでやけに長いレシートに遭遇 店員さんのテンションがすごかったエッセイ漫画
【なんて読む?】今日の難読漢字「破落戸」
「なんで私のことが漫画になってるのよ」―― Twitterで始まった漫画「自分のことが勝手に漫画にされてる女の子」の続きが気になる
ダレノガレ明美、当て逃げ被害に怒り心頭「誰や!」 ドラレコから犯人特定し手際よく対応する
Switch用ソフト「ファイナルソード」がついに配信再開 タイトルには「Definitive Edition」の文字
ダレノガレ明美、給与明細公開でパパ活疑惑を否定 オリラジ藤森「ケタが……」「おえっ」と言葉にならず
先週の総合アクセスTOP10
- 「訃報」「愛猫」「手風琴」って読める? 常用漢字表に掲載されている“難読漢字”
- 嫌がらせ急ブレーキで追突 トラクターの進路を妨害した「あおり運転」ベンツ、ぶつけられたと運転手がブチギレ
- 猫「雪なんてへっちゃらニャー!」 雪の中を豪快に突き進む猫ちゃんに「ラッセル車みたい」「ワイルドかわいい」の声
- 「Lチキひとつ」 → 買った物をよくみると? コンビニで犯したありがちな間違いを描いた4コマに「あるある」「逆もある」
- 柴犬「きゃほほーーい!!」 初めての雪に“喜びが限界突破した”ワンコの駆け回る姿がかわいい
- 「ホント太るのって簡単!」「あっという間に70キロ」 内山信二の妻、夫に生活リズムを合わせた“ふとっちょ時代”公開
- ルーフから赤色灯がひょっこり 埼玉県警、スバル「WRX S4」覆面パトカー3台を追加導入!? Twitterにアップされた目撃情報が話題に
- 益若つばさ、YouTubeで12歳息子と共演 礼儀正しい振る舞いに「教育がちゃんとされてる」
- トップの座を奪われ……美大生が天才の編入生を刺し“殺す”漫画に「泣きそう」「同じ経験した」の声
- タイからバズーカ砲をかかかえたようなミニバイク「GUNNER50」が日本上陸 思わずキュンと来ちゃうやばいデザイン
先月の総合アクセスTOP10
- 「訃報」「愛猫」「手風琴」って読める? 常用漢字表に掲載されている“難読漢字”
- 井上咲楽、“太眉”を人生初カットで別人に 「可愛いすぎます」「さらにファンになりました」と大反響
- 元「うたのおにいさん」今井ゆうぞうさんが脳内出血で急逝 生前最後のブログには“目の異常な充血”
- 2021年夏の祝日、東京五輪で変更 カレンダーの更新を
- 太眉卒業した井上咲楽、美しさ光るアップショットに大反響 「大人っぽーい」「すっかり美しい路線に」
- 「逃げ場のない恐怖」「爆発音で目が覚めた」 JAL904便がエンジントラブルで緊急着陸、乗客が撮影した映像が怖すぎる
- マックポテト「Mサイズのみ」味が変との声がネットであがる マクドナルドに話を聞いた
- 「これは天才」「来年のノーベル賞候補」 ホットサンドメーカーで焼く「ホットサンドケーキ」が悪魔的サクサク感で話題に
- 保護した子ネコに「寂しくないように」とあげたヌイグルミ お留守番後に見せた子ネコの姿に涙が出る
- アロンアルフアは5秒で接着→「時間が余ったので猫動画をご覧ください」 15秒CMのペース配分がおかしい