ニュース

置いたオモチャが画面に登場、思い通りに動かせる MSが研究中のスマートパッドが楽しそう

NFCタグ付きのオモチャやブロックをマットに置くことで、画面や音声、ロボットなどを制御できる。

advertisement

 マイクロソフトが「Project Zanzibar(プロジェクトザンジバル)」として、教育向けの新たなデバイスを研究しています。マットの上でオモチャやブロックを動かすと、連動して画面に映像が出たり音が鳴ったり……空想遊びを具現化できそう。

積み木を置くと、その通りのオブジェクトが画面に出てくる
マットにカードを置いて操作するボードゲームにも応用可能
タイルを置くと書かれた文字が表示。指でなぞることで、書写の学習もできる

 タッチ操作と空中の手や物の動き、NFCタグを検知するマットを軸にしたシステム。タグの付いたオモチャやブロックを認識し、見た目が同じキャラクターを画面に表示するなどできます。背景用のオブジェを置くと場面が変わる仕組みで、例えばヤシの木を置くと舞台が南国になるのだとか。

マットへの接触や、上空にある物の動きを検知できる
NFCタグを読み込み、置かれた物の座標や角度を認識することもできる
Bluetoothを介してのスマホ連動も。デモではスマホでマットをなぞることで、隠された絵がスマホに表示されるという遊びが提示されている

 デモ動画ではゲームや教材としての使用例を紹介。タグ付きのカードを使用すれば『遊☆戯☆王』チックなバトルを体験できますし、人形や積み木などを置いて画面上で劇をする遊びもできます。カメラのオブジェをソフトウェアにカメラとして認識させ、そこから見たアングルの映像をモニターに表示するなんて芸当も可能。

advertisement
場に出したカードのキャラクターが、そのまま画面に出現
オブジェをソフトにカメラと認識させると……
本当に撮影しているかのように、オブジェから見た視点の映像が表示される

 このシステムは、画面とセットで使うとは限りません。おもちゃの大砲を撃つと発射音が鳴ったり、タイルを並べて英単語を作るとその発音が再生されたりと、音をメインにした使い方も可能です。ロボットへの命令が書かれたブロックを置き、プログラムで動かすこともでき、可能性は多岐に渡ります。

大砲を向けると、人形が「撃たないで~」と言う演出が
撃つと発射音が再生される
文字のタイルを「car」と並べると、その発音が聞ける
ターンや直線、条件分岐といった命令ブロックを並べてプログラムを作成
指示通りにブロックを動かせる

 同プロジェクトの論文はHCI(Human-Computer Interaction)研究の国際会議「CHI 2018」でベストペーパー賞を受賞。カナダで4月23日~26日に開催されるCHIの大会で、同社はデモンストレーションを行うとのことです。

(沓澤真二)

Copyright © ITmedia, Inc. All Rights Reserved.

記事ランキング

  1. 「飼いきれなくなったからタダで持ってきなよ」と言われ飼育放棄された超大型犬を保護→ 1年後の今は…… 飼い主に聞いた
  2. 大谷翔平、インスタ最新投稿で活躍シーンのハイライト公開 一瞬映る“妻・真美子さんと母・加代子さんの笑顔満開ハイタッチ”に注目
  3. まるで星空……!! ダイソーの糸を組み合わせ、ひたすら編む→完成したウットリするほど美しい模様に「キュンキュンきます」「夜雪にも見える」
  4. ドクダミを手で抜かず、ハサミで切ると…… 目からウロコの検証結果が435万再生「凄い事が起こった」「逆効果だったとは」
  5. 「ディズニーのそういう所だよ」 1歳息子、初ディズニーで言われた“まさかの一言”は…… キャストの愛ある“神対応”が656万表示
  6. 「ちょっと怖い!!」 ミニトマト“1粒”を土に埋めて1カ月育てたら…… → “予想外の光景”に驚がく 「そうなるとは」
  7. 「2度とライブ来るな」とファン激怒 星街すいせい、“コンサート演出の紙吹雪”が「3万円で売買されてる」 高値転売が物議
  8. 「とんだ裏切りwww」 整骨院が休業→店舗の張り紙を見たら…… “まさかの理由”にツッコミ殺到 「これは仕方ない」
  9. 330円で買ったジャンクのファミコンをよく見ると……!? まさかのレアものにゲームファン興奮「押すと戻らないやつだ」
  10. 大量のハギレを正方形にカット→つなげていくと…… “ちょっとした工夫”で便利アイテムに大変身! 「どんな小さな布も生き返る」