置いたオモチャが画面に登場、思い通りに動かせる　MSが研究中のスマートパッドが楽しそう

NFCタグ付きのオモチャやブロックをマットに置くことで、画面や音声、ロボットなどを制御できる。

» 2018年04月12日 20時30分 公開
[沓澤真二，ねとらぼ]

　マイクロソフトが「Project Zanzibar（プロジェクトザンジバル）」として、教育向けの新たなデバイスを研究しています。マットの上でオモチャやブロックを動かすと、連動して画面に映像が出たり音が鳴ったり……空想遊びを具現化できそう。


オブジェ 積み木を置くと、その通りのオブジェクトが画面に出てくる

カードゲーム マットにカードを置いて操作するボードゲームにも応用可能

教材 タイルを置くと書かれた文字が表示。指でなぞることで、書写の学習もできる

　タッチ操作と空中の手や物の動き、NFCタグを検知するマットを軸にしたシステム。タグの付いたオモチャやブロックを認識し、見た目が同じキャラクターを画面に表示するなどできます。背景用のオブジェを置くと場面が変わる仕組みで、例えばヤシの木を置くと舞台が南国になるのだとか。


タッチモーション マットへの接触や、上空にある物の動きを検知できる

NFCNFC NFCタグを読み込み、置かれた物の座標や角度を認識することもできる

スマホ連動スマホ連動 Bluetoothを介してのスマホ連動も。デモではスマホでマットをなぞることで、隠された絵がスマホに表示されるという遊びが提示されている

　デモ動画ではゲームや教材としての使用例を紹介。タグ付きのカードを使用すれば『遊☆戯☆王』チックなバトルを体験できますし、人形や積み木などを置いて画面上で劇をする遊びもできます。カメラのオブジェをソフトウェアにカメラとして認識させ、そこから見たアングルの映像をモニターに表示するなんて芸当も可能。


カードバトル 場に出したカードのキャラクターが、そのまま画面に出現

カメラ オブジェをソフトにカメラと認識させると……

カメラ 本当に撮影しているかのように、オブジェから見た視点の映像が表示される

　このシステムは、画面とセットで使うとは限りません。おもちゃの大砲を撃つと発射音が鳴ったり、タイルを並べて英単語を作るとその発音が再生されたりと、音をメインにした使い方も可能です。ロボットへの命令が書かれたブロックを置き、プログラムで動かすこともでき、可能性は多岐に渡ります。


大砲 大砲を向けると、人形が「撃たないで〜」と言う演出が

発射 撃つと発射音が再生される

綴り 文字のタイルを「car」と並べると、その発音が聞ける

プログラム ターンや直線、条件分岐といった命令ブロックを並べてプログラムを作成

ロボット 指示通りにブロックを動かせる

　同プロジェクトの論文はHCI（Human-Computer Interaction）研究の国際会議「CHI 2018」でベストペーパー賞を受賞。カナダで4月23日〜26日に開催されるCHIの大会で、同社はデモンストレーションを行うとのことです。


（沓澤真二）


Copyright © ITmedia, Inc. All Rights Reserved.

先週の総合アクセスTOP10
  1. 小1娘、ペンギンの卵を楽しみに育ててみたら……　期待を裏切る生き物の爆誕に「声出して笑ってしまったw」「反応がめちゃくちゃ可愛い」
  2. 富山県警のX投稿に登場の女性白バイ隊員に過去一注目集まる「可愛い過ぎて、取締り情報が入ってこない」
  3. 2カ月赤ちゃん、おばあちゃんに少々強引な寝かしつけをされると……　コントのようなオチに「爆笑！」「可愛すぎて無事昇天」
  4. 異世界転生したローソン出現　ラスボスに挑む前のショップみたいで「合成かと思った」「日本にあるんだ」
  5. 【今日の計算】「8＋9÷3−5」を計算せよ
  6. 21歳の無名アイドル、ビジュアル拡散で「あの頃の橋本環奈すぎる」とSNS騒然　「実物の方が可愛い」「見つかっちゃったなー」の声も
  7. 1歳赤ちゃん、寝る時間に現れないと思ったら……　思わぬお仲間連れとご紹介が「めっちゃくちゃ可愛い」と220万再生
  8. 業務スーパーで買ったアサリに豆乳を与えて育てたら……　数日後の摩訶不思議な変化に「面白い」「ちゃんと豆乳を食べてた？」
  9. 祖母から継いだ築80年の古家で「謎の箱」を発見→開けてみると……　驚きの中身に「うわー！スゴッ」「かなり高価だと思いますよ！」
  10. 「ゆるキャン△」のイメージビジュアルそのまま？　工事の看板イラストが登場キャラにしか見えない　工事担当者「狙いました」
先月の総合アクセスTOP10
  1. フワちゃん、弟の結婚式で卑劣な行為に「席次見て名前覚えたからな」　めでたい場でのひんしゅく行為に「プライベート守ろうよ！」の声
  2. 親が「絶対たぬき」「賭けてもいい」と言い張る動物を、保護して育ててみた結果……　驚愕の正体が230万表示「こんなん噴くわ！」
  3. 水道検針員から直筆の手紙、驚き確認すると……　メーターボックスで起きた珍事が300万再生「これはびっくり」「生命の逞しさ」
  4. フワちゃん、収録中に見えてはいけない“部位”が映る　まさかの露出に「拡大しちゃったじゃん」「またか」の声
  5. スーパーで売れ残っていた半額のカニを水槽に入れてみたら……　220万再生された涙の結末に「切なくなった」「凄く感動」
  6. 桐朋高等学校、78期卒業生の答辞に賛辞やまず　「只者ではない」「感動のあまり泣いて10回読み直した」
  7. 「これは悲劇」　ヤマザキ“春のパンまつり”シールを集めていたはずなのに……　途中で気づいたまさかの現実
  8. 「ふざけんな」　宿泊施設に「キャンセル料金を払わなくする方法」が物議　宿泊施設「大目に見てきたが厳格化する」
  9. がん闘病中の見栄晴、20回以上の放射線治療を受け変化が……　「痛がゆくなって来ました」
  10. 食べ終わったパイナップルの葉を土に植えたら……　3年半後、目を疑う結果に「もう、ただただ感動です」「ちょっと泣きそう」