ニュース
» 2018年05月09日 11時30分 公開

「VTuberに近づきたい」→JINS MEMEとiPhoneだけでVTuberになれるシステムを実現 開発者に思いを聞いた

メガネに内蔵されたセンサーで頭や視線の動きを読み取り、iPhone上のモデルで表情を再現。

[沓澤真二,ねとらぼ]

 「世界一(?)スマートにVTuberになるシステム作った」と、Twitterに投稿された動画が本当にスマートです。モーションセンサーやカメラなどを要さず、メガネ型ウェアラブルデバイス「JINS MEME」とiPhoneだけで、VTuber(バーチャルYouTuber)のようにアバターを動かすシステムを実現しています。


視線 装着者の動作に追随して、アバターの視線や口も動く

おじぎ 装着者に合わせてアバターもペコリ

 JINS MEMEの装着者が頭や視線を動かすと、追随してiPhoneに表示されたアバターの表情が変化。まばたきやしゃべるときの口の動きも、そのまま反映されます。機材がコンパクトなので、場所を選ばずに使える点も便利です。


 これを1日程度で作り上げたという、開発者のイワケン(@tanaka_lit)さんに編集部は仕組みを聞きました。基本的にはJINS MEMEが読み取った装着者の動きを、iOSに送ってアバターに反映させるシステム。内蔵のジャイロセンサーが頭の動きを、眼電位センサーがまばたきや目の動きを、自動的に取得してくれるそうです。口の動きについては、音声から口の動きを再現する「Lipsync」技術を用いているとのこと。

 iOSアプリはJINSが無料公開している、JINS MEME用のSDK(ソフトウェア開発キット)を利用して制作。取得した装着者のデータを元に、アバターに動きや表情をつける仕組みです。

 開発の目的は、大好きなVTuberの世界を広げること。アイデアが浮かび次第新しいシステムをどんどん開発し、興味を持ってくれた人と面白いコンテンツを一緒に考えたいと語っています。今回のシステムを発展させるとしたら、出会った人に装着させてVTuber体験をしてもらい、広めていきたいとも。

 ほかにも、iOSアプリとしてのストア申請や、手の動きの再現、VTuberとして配信できるシステムの追加などを検討しているそうです。あくまでも趣味の活動として収益化はいったん考えず、楽しく面白い方向を目指すと語るイワケンさん。自身もVTuberへ近づきたい思いがあり、YouTube番組の「VRoadCaster」に出演してみたいとのことです。

画像提供:イワケン(@tanaka_lit)さん

(沓澤真二)


Copyright © ITmedia, Inc. All Rights Reserved.

昨日の総合アクセスTOP10

  1. /nl/articles/2110/25/news149.jpg 「くそが……!」 最上もが、奮発した「Uber Eats」の対応に怒り爆発 1400円ステーキの“中身”に「絶望」「もう頼まねえ」
  2. /nl/articles/2110/24/news050.jpg 庄司智春、愛車ダッジ・チャレンジャーが廃車に ガソリンスタンドで炎上、ボンネットから発煙し「やばい」
  3. /nl/articles/2110/25/news079.jpg 浜崎あゆみ、帝王切開の経験を告白 「お腹の傷を愛おしく誇りに思う」と“消えない偏見”に思いつづる
  4. /nl/articles/2110/25/news007.jpg 「ロード・オブ・ザ・リング」の重要アイテムがカプセルトイで登場 “ひとつの指輪”も手に入ってしまう
  5. /nl/articles/2110/25/news051.jpg 「アッ...アッ......困りますお客さま…!」 子猫を迎えて2日目、すっかり懐いて飼い主を無事メロメロにしてしまう
  6. /nl/articles/2110/24/news049.jpg 本田望結、小型船舶免許を取得し免許証を公開 姉・真凜もびっくり「凄っ、知らんかったって笑」
  7. /nl/articles/2110/23/news032.jpg 『ちいかわ』が“幸福論を問う作品”であるという決定打 なぜ「オフィスグリコちゃんのカエル」でTwitterがどよめいたのか
  8. /nl/articles/2110/24/news027.jpg 所さんのピンクのフィアット500が事故で「水没」 めっちゃかっこいい、からの「普通に失敗しちゃうところも好き」の声
  9. /nl/articles/2110/24/news044.jpg 深田恭子、2022年のカレンダーで花に囲まれた美女ショット ファン「美しすぎる」「来年も一緒に過ごします!」
  10. /nl/articles/2110/21/news028.jpg 本当にあったZoomの怖い話 母がうっかりカメラON、100人に実家が丸見えになった実録漫画が地獄みしかない

先週の総合アクセスTOP10

  1. 葉月里緒奈、美人な元マネジャーと“再会2ショット” 「共演した俳優さん達は私ではなく彼女を口説いてました」
  2. docomo×進撃の巨人キャンペーンの商品「リヴァイ兵長フィギュア」が悲惨な出来だと話題に → 公式が謝罪「対応方法を検討しております」
  3. 有吉弘行、妻・夏目三久との“イラストショット”を公開 蛭子能収からのプレゼントに「下書きも消さずにうれしい!!」
  4. 「印象が全然違う!」「ほんとに同じ人なの!?」 会社の女性に勧められてヘアカットした男性のビフォーアフター動画に反響
  5. 梅宮アンナ、父・辰夫さんの看板が黒塗りされ悲しみ 敬意感じられない対応に「残酷で、余りにも酷い行為」
  6. 子猫が、生まれたての“人間の妹”と初対面して…… 見守るように寄り添う姿がキュン死するほどかわいい
  7. 工藤静香、バブルの香り漂う33年前の“イケイケショット” ファンからは「娘さんそっくり」「ココちゃん似てる」
  8. 板野友美、エコー写真とそっくりな娘の顔出しショットを公開 ぱっちり目の美形な姿に「こんな美人な赤ちゃん初めて見た」
  9. 後藤晴菜アナ、三竿健斗との2ショット写真で結婚を報告 フジ木村拓也アナ、鷲見玲奈アナからも祝福のコメント
  10. 「とりあえず1000個買います」 水嶋ヒロ、妻・絢香仕様の“白い恋人”に財布の紐が緩みまくる