置いたオモチャが画面に登場、思い通りに動かせる MSが研究中のスマートパッドが楽しそう

NFCタグ付きのオモチャやブロックをマットに置くことで、画面や音声、ロボットなどを制御できる。

» 2018年04月12日 20時30分 公開
[沓澤真二ねとらぼ]

 マイクロソフトが「Project Zanzibar(プロジェクトザンジバル)」として、教育向けの新たなデバイスを研究しています。マットの上でオモチャやブロックを動かすと、連動して画面に映像が出たり音が鳴ったり……空想遊びを具現化できそう。


オブジェ 積み木を置くと、その通りのオブジェクトが画面に出てくる

カードゲーム マットにカードを置いて操作するボードゲームにも応用可能

教材 タイルを置くと書かれた文字が表示。指でなぞることで、書写の学習もできる

 タッチ操作と空中の手や物の動き、NFCタグを検知するマットを軸にしたシステム。タグの付いたオモチャやブロックを認識し、見た目が同じキャラクターを画面に表示するなどできます。背景用のオブジェを置くと場面が変わる仕組みで、例えばヤシの木を置くと舞台が南国になるのだとか。


タッチモーション マットへの接触や、上空にある物の動きを検知できる

NFCNFC NFCタグを読み込み、置かれた物の座標や角度を認識することもできる

スマホ連動スマホ連動 Bluetoothを介してのスマホ連動も。デモではスマホでマットをなぞることで、隠された絵がスマホに表示されるという遊びが提示されている

 デモ動画ではゲームや教材としての使用例を紹介。タグ付きのカードを使用すれば『遊☆戯☆王』チックなバトルを体験できますし、人形や積み木などを置いて画面上で劇をする遊びもできます。カメラのオブジェをソフトウェアにカメラとして認識させ、そこから見たアングルの映像をモニターに表示するなんて芸当も可能。


カードバトル 場に出したカードのキャラクターが、そのまま画面に出現

カメラ オブジェをソフトにカメラと認識させると……

カメラ 本当に撮影しているかのように、オブジェから見た視点の映像が表示される

 このシステムは、画面とセットで使うとは限りません。おもちゃの大砲を撃つと発射音が鳴ったり、タイルを並べて英単語を作るとその発音が再生されたりと、音をメインにした使い方も可能です。ロボットへの命令が書かれたブロックを置き、プログラムで動かすこともでき、可能性は多岐に渡ります。


大砲 大砲を向けると、人形が「撃たないで〜」と言う演出が

発射 撃つと発射音が再生される

綴り 文字のタイルを「car」と並べると、その発音が聞ける

プログラム ターンや直線、条件分岐といった命令ブロックを並べてプログラムを作成

ロボット 指示通りにブロックを動かせる

 同プロジェクトの論文はHCI(Human-Computer Interaction)研究の国際会議「CHI 2018」でベストペーパー賞を受賞。カナダで4月23日〜26日に開催されるCHIの大会で、同社はデモンストレーションを行うとのことです。


(沓澤真二)


Copyright © ITmedia, Inc. All Rights Reserved.

昨日の総合アクセスTOP10
先週の総合アクセスTOP10
  1. 小泉進次郎、生後3カ月の長女を抱く姿に「貴重なパパの顔」 2023年末には小泉元首相の“幸せじいじ姿”も話題に
  2. 庭にアジサイがあるなら知っておくべき!? 春になる前に急いでやりたい“大きな花を咲かせる”お手入れ術に反響続々
  3. 生まれたばかりの孫に会いに来た両親、赤ちゃんを見た瞬間号泣し…… 幸せあふれる光景に「一緒に泣いちゃいました」
  4. つんく♂、「僕の大好きな妻」と元モデル妻の貴重ショット公開 「めちゃくちゃお綺麗」と反響
  5. 小泉純一郎元首相、進次郎&滝クリの第2子“孫抱っこ”でデレデレ笑顔 幸せじいじ姿に「顔が優しすぎ」「お孫さんにメロメロ」
  6. 「ずっと手を触って」「強烈な口説きが」 グラドル、元K-1王者のセクハラ行為を“告発”→反論しバトルに 「引っ込んどけよロバは」謎の容姿罵倒で流れ弾も
  7. 2歳娘、帝王切開で入院するママの前では強がっていたが…… 離れてから号泣する姿に「いじらしくて可愛くて朝から泣いた」
  8. 業務スーパーの“高コスパ”人気冷凍商品に「基準値超え添加物」 約1万5000個販売……自主回収を実施
  9. 長女と赤ちゃんの夜のルーティンが「可愛いしか言えん」 愛が強すぎな姉から逃げる姿に「嫌いじゃないのねw」「素敵な姉妹」
  10. 「ほんと愛でしかない」「心から尊敬します」 “6男7女の大家族”うるしやま家のスーパーママ、“15人分のお弁当作り”が神業レベルで称賛の声
先月の総合アクセスTOP10
  1. 釣れたキジハタを1年飼ってみると…… 飼い主も驚きの姿に「もはや、魚じゃない」「もう家族やね」と反響
  2. パーカーをガバッとまくり上げて…… 女性インフルエンサー、台湾でボディーライン晒す 上半身露出で物議 「羞恥心どこに置いてきたん?」
  3. “TikTokはエロの宝庫だ” 女性インフルエンサー、水着姿晒した雑誌表紙に苦言 「なんですか? これ?」
  4. 1歳妹を溺愛する18歳兄、しかし妹のひと言に表情が一変「ちがうなぁ!?」 ママも笑っちゃうオチに「かわいいし天才笑」「何度も見ちゃう」
  5. 8歳兄が0歳赤ちゃんを寝かしつけ→2年後の現在は…… 尊く涙が出そうな光景に「可愛すぎる兄妹」「本当に優しい」
  6. 1人遊びに夢中な0歳赤ちゃん、ママの視線に気付いた瞬間…… 100点満点のリアクションにキュン「かわいすぎて鼻血出そう!」
  7. 67歳マダムの「ユニクロ・緑のヒートテック重ね着術」に「色の合わせ方が神すぎる」と称賛 センス抜群の着こなしが参考になる
  8. “双子モデル”りんか&あんな、成長した姿に驚きの声 近影に「こんなにおっきくなって」「ちょっと見ないうちに」
  9. 犬が同じ場所で2年間、トイレをし続けた結果…… 笑っちゃうほど様変わりした光景が379万表示「そこだけボッ!ってw」
  10. 新幹線で「高級ウイスキー」を注文→“予想外のサイズ”に仰天 「むしろすげえ」「家に飾りたい」