「VTuberに近づきたい」→JINS MEMEとiPhoneだけでVTuberになれるシステムを実現 開発者に思いを聞いた
メガネに内蔵されたセンサーで頭や視線の動きを読み取り、iPhone上のモデルで表情を再現。
「世界一(?)スマートにVTuberになるシステム作った」と、Twitterに投稿された動画が本当にスマートです。モーションセンサーやカメラなどを要さず、メガネ型ウェアラブルデバイス「JINS MEME」とiPhoneだけで、VTuber(バーチャルYouTuber)のようにアバターを動かすシステムを実現しています。
JINS MEMEの装着者が頭や視線を動かすと、追随してiPhoneに表示されたアバターの表情が変化。まばたきやしゃべるときの口の動きも、そのまま反映されます。機材がコンパクトなので、場所を選ばずに使える点も便利です。
これを1日程度で作り上げたという、開発者のイワケン(@tanaka_lit)さんに編集部は仕組みを聞きました。基本的にはJINS MEMEが読み取った装着者の動きを、iOSに送ってアバターに反映させるシステム。内蔵のジャイロセンサーが頭の動きを、眼電位センサーがまばたきや目の動きを、自動的に取得してくれるそうです。口の動きについては、音声から口の動きを再現する「Lipsync」技術を用いているとのこと。
iOSアプリはJINSが無料公開している、JINS MEME用のSDK(ソフトウェア開発キット)を利用して制作。取得した装着者のデータを元に、アバターに動きや表情をつける仕組みです。
開発の目的は、大好きなVTuberの世界を広げること。アイデアが浮かび次第新しいシステムをどんどん開発し、興味を持ってくれた人と面白いコンテンツを一緒に考えたいと語っています。今回のシステムを発展させるとしたら、出会った人に装着させてVTuber体験をしてもらい、広めていきたいとも。
ほかにも、iOSアプリとしてのストア申請や、手の動きの再現、VTuberとして配信できるシステムの追加などを検討しているそうです。あくまでも趣味の活動として収益化はいったん考えず、楽しく面白い方向を目指すと語るイワケンさん。自身もVTuberへ近づきたい思いがあり、YouTube番組の「VRoadCaster」に出演してみたいとのことです。
(沓澤真二)
関連記事
バーチャルキャラになって配信できるサービス「バーチャルキャスト」 ドワンゴとインフィニットループが提供
他のユーザーの配信に乱入したりできます。宇宙だ…… バーチャルYouTuberのチャンネル登録者数をアイコンで表現した動画に「感動した」「センスありすぎ」の声
謎の感動。ドラえもんの世界がここに実現! 目の動きでスマホを操作する次世代メガネ「JINS MEME」を体験してみた
気分はもう魔法使いなの〜。3Dスキャンした実写アバターで「VRオフ会」する猛者が登場 もはやオフなのかオンなのか分からないと話題に
どういうことなの……。話題の「バーチャルYouTuber」はなぜ突然ブレークしたのか? 今、このバーチャルYouTuberを見逃すな!
バラバラに出たのに、みんなで1つに見える不思議。
関連リンク
Copyright © ITmedia, Inc. All Rights Reserved.
昨日の総合アクセスTOP10
「訃報」「愛猫」「手風琴」って読める? 常用漢字表に掲載されている“難読漢字”
“東大王”鈴木光が『CanCam』デビュー “美しすぎる東大生”の新たな一面
筑波大学、合計20トンの食料を学生に支援 想像を超えるクソデカ配給に「笑うしかない」とうれしい悲鳴も
「絵にしか見えないガンプラ」に頭がバグる! アニメ塗りのユニコーンガンダムがまるで合成写真
「えっ!? おきゃくさまっ!」 スターバックスでやけに長いレシートに遭遇 店員さんのテンションがすごかったエッセイ漫画
【なんて読む?】今日の難読漢字「破落戸」
「なんで私のことが漫画になってるのよ」―― Twitterで始まった漫画「自分のことが勝手に漫画にされてる女の子」の続きが気になる
ダレノガレ明美、当て逃げ被害に怒り心頭「誰や!」 ドラレコから犯人特定し手際よく対応する
Switch用ソフト「ファイナルソード」がついに配信再開 タイトルには「Definitive Edition」の文字
ダレノガレ明美、給与明細公開でパパ活疑惑を否定 オリラジ藤森「ケタが……」「おえっ」と言葉にならず
先週の総合アクセスTOP10
- 「訃報」「愛猫」「手風琴」って読める? 常用漢字表に掲載されている“難読漢字”
- 嫌がらせ急ブレーキで追突 トラクターの進路を妨害した「あおり運転」ベンツ、ぶつけられたと運転手がブチギレ
- 猫「雪なんてへっちゃらニャー!」 雪の中を豪快に突き進む猫ちゃんに「ラッセル車みたい」「ワイルドかわいい」の声
- 「Lチキひとつ」 → 買った物をよくみると? コンビニで犯したありがちな間違いを描いた4コマに「あるある」「逆もある」
- 柴犬「きゃほほーーい!!」 初めての雪に“喜びが限界突破した”ワンコの駆け回る姿がかわいい
- 「ホント太るのって簡単!」「あっという間に70キロ」 内山信二の妻、夫に生活リズムを合わせた“ふとっちょ時代”公開
- ルーフから赤色灯がひょっこり 埼玉県警、スバル「WRX S4」覆面パトカー3台を追加導入!? Twitterにアップされた目撃情報が話題に
- 益若つばさ、YouTubeで12歳息子と共演 礼儀正しい振る舞いに「教育がちゃんとされてる」
- トップの座を奪われ……美大生が天才の編入生を刺し“殺す”漫画に「泣きそう」「同じ経験した」の声
- タイからバズーカ砲をかかかえたようなミニバイク「GUNNER50」が日本上陸 思わずキュンと来ちゃうやばいデザイン
先月の総合アクセスTOP10
- 「訃報」「愛猫」「手風琴」って読める? 常用漢字表に掲載されている“難読漢字”
- 井上咲楽、“太眉”を人生初カットで別人に 「可愛いすぎます」「さらにファンになりました」と大反響
- 元「うたのおにいさん」今井ゆうぞうさんが脳内出血で急逝 生前最後のブログには“目の異常な充血”
- 2021年夏の祝日、東京五輪で変更 カレンダーの更新を
- 太眉卒業した井上咲楽、美しさ光るアップショットに大反響 「大人っぽーい」「すっかり美しい路線に」
- 「逃げ場のない恐怖」「爆発音で目が覚めた」 JAL904便がエンジントラブルで緊急着陸、乗客が撮影した映像が怖すぎる
- マックポテト「Mサイズのみ」味が変との声がネットであがる マクドナルドに話を聞いた
- 「これは天才」「来年のノーベル賞候補」 ホットサンドメーカーで焼く「ホットサンドケーキ」が悪魔的サクサク感で話題に
- 保護した子ネコに「寂しくないように」とあげたヌイグルミ お留守番後に見せた子ネコの姿に涙が出る
- アロンアルフアは5秒で接着→「時間が余ったので猫動画をご覧ください」 15秒CMのペース配分がおかしい