紙を指でなぞると情報をスキャン 次世代のタッチユーザーインタフェース
紙や本を指でなぞると情報を読み取って電子データにできる――カメラとプロジェクターを使ったシステムを富士通研究所が開発した。
富士通研究所は、紙や本など実世界にあるものを指で直接選択するだけでデータのやり取りを可能にするシステムを開発しました。
紙やいろいろな物がタッチパネルのように触って操作ができると考えています。この装置は、特別なハードウェアは一切使っていなくて、通常のWebカメラ相当のものと市販のプロジェクターのみで構成して、画像処理の技術を使ってこの機能を実現しています。
この技術を用いることで、書類を指でなぞって必要な箇所を電子データとして取り込むことができます。
操作対象となる実世界の物体の形状を計測し、カメラとプロジェクターと実世界の3つの座標系を自動で調整する技術により、テーブルや紙など平坦な面だけでなく、厚みのある本などの歪んだ面であってもタッチと表示を正確に合わせることが可能です。
今までの手の動きを使ったジェスチャー操作は、ジェスチャーでパソコンやいろいろな機器を操作するといったものが多かったと思いますが、こちらはパソコンの操作をするものではなくて、直接実際のものに触って、その物とICTの機器を融合させようというインタフェースになっています。
通常のテーブルの上でのアナログ的な操作の時には反応しないようにしています。1本指を出すと操作が可能になります。ということで、アナログの作業とデジタル機器への操作を融合させるようなインタフェースになっています。
正確なタッチの検出には指先の高さを正確に検出する必要があります。特に今回使っているカメラ(320×180)では、指先の検出が1画素ずれるだけで、高さが1センチ変化してしまうため、精度の高い指先認識技術が必要です。
低解像度のWebカメラを使っていて画像が粗いんですが、それを画像処理で補間することで高精度な3次元位置を計算しています。
また、周囲の環境光に応じた色や明るさの制御と手の色の個人差を補正する技術により、環境や個人差の影響の少ない安定した手指の抽出を実現しています。
さらにタッチを用いない空間でのジェスチャー操作も可能です。このデモでは、握った状態の手を動かすと3次元CADデータの視点を操作できます。このような既存のジェスチャー操作と今回のタッチ操作を組み合わせたようなアプリケーションも考えられます。
例えば旅行会社のカウンターであったり、役所などで申請書を書くような場所で詳しい情報を表示したりといった用途があるかなと思います。
2014年度の製品化をめどに開発を行っています。まだデモンストレーションレベルで実際の現場で使って頂いていないので、現場の方々に実際に使って頂いて課題を抽出してユーザビリティの評価を行って、この装置に反映していきたいと思っています。
関連記事
- いつもより多く回しております:皿回しのようにタブレットをグルグル 回転で操作するインタフェース
「Whirled Worlds」は、タブレットを皿回しのように回したり、スマホをひもの先に付けて回転させてアプリやゲームを操作できるインタフェース。 - まるで「マイノリティ・リポート」 空中の映像をジェスチャーで動かす技術、ロシア企業が開発
空中の映像を触って動かしているように見える技術を、ロシアのDisplAirという企業が開発した。デモ動画が未来的だ。 - CEDEC 2011:触られてないのにくすぐったい感覚 触覚デバイスの未来を見てきた
iPhoneの画面を触ると、手のひらにくすぐられたような感覚が――リアルな触覚を再現するデバイスの研究成果が、CEDEC 2011で発表されている。 - あの“梶本研究室”に行ってみた(後編):ゲームと「触覚」は相性がいい? 触覚デバイスがもたらすコミュニケーションの未来像とは
なぜ「触覚デバイス」は普及していないのだろうか。後編となる今回は、学生たちを指導する梶本裕之先生に、触覚デバイスの課題や、触覚研究の可能性についてうかがった。 - あの“梶本研究室”に行ってみた(前編):「遠隔地とキス」を発展させると「どこでもドア」になる? 触覚デバイスがもたらすコミュニケーションの未来像とは
電気通信大学のある学生が「遠隔地の相手とキスができるデバイス」を作った。電話やビデオチャットでは伝わらない「触覚」を、もし遠距離の相手に伝えられるとしたら――。同デバイスを開発した、電気通信大学 梶本研究室に「触覚デバイス」の未来を聞いた。
Copyright(c) Digitized Information, Inc. All Rights Reserved.
-
市役所で手続き中、急に笑い出した職員→何かと思って横を見たら…… 同情せざるを得ない衝撃の光景に「私でも笑ってしまう」「こんなん見たら仕事できない」
-
お風呂の“追いだき配管”を掃除してみたら…… エグすぎる光景に悲鳴の嵐 「画面越しに臭うレベル」「みそ汁作ってんか?」
-
「今までなんで使わなかったのか」 ワークマンの「アルミ帽子」が暑さ対策に最強だった 「めっちゃ涼しー」
-
犬が同じ場所で2年間、トイレをし続けた結果…… 笑っちゃうほど様変わりした光景が379万表示「そこだけボッ!ってw」
-
ホワイトタイガーの子ども、調子に乗ってお母さんの尻尾を…… まるで漫画のような展開と表情に笑ってしまう
-
解体進む“動くガンダム”、いよいよ骨組のみに それでも「ガンプラのフレームみたい」とファン注目
-
どうやって回ってんの!? 透明な時計の“不思議な仕組み”が天才的 「どうやったら買える?」「天才の頭脳」【海外】
-
【今日の計算】「2+7×9−3」を計算せよ
-
ボロボロのコンロを使っていたベトナム人母に、日本のガスコンロをプレゼントしたら…… 涙を誘う感動のサプライズに反響
-
【今日の難読漢字】「鱸」←何と読む?
- 釣りに行こうとしたら、海岸に子猫が打ち上げられていて…… 保護後、予想だにしない展開に「神様降臨」「涙が止まりません」
- 身長174センチの女性アイドルに「ここは女性専用車両です!!!」 電車内で突如怒られ「声か、、、」と嘆き 「理不尽すぎる」と反響の声
- しぶとい雑草“ドクダミ”を生やさない超簡単な方法が115万再生! 除草剤を使わない画期的な対策に「スゴイ発見」
- 天井裏から変な音がする→スマホを突っ込んで撮影したら…… 映った“とんでもねぇ”モノに「恐ろしい」「何これ」と騒然の196万表示!
- 小1娘、ペンギンの卵を楽しみに育ててみたら…… 期待を裏切る生き物の爆誕に「声出して笑ってしまったw」「反応がめちゃくちゃ可愛い」
- 誰も教えてくれなかった“裁縫の裏ワザ”が目からウロコ 200万再生のライフハックに「画期的」と称賛【海外】
- 「電車の中で見ちゃダメ」「笑ったww」 実家からLINE「子ヤギがすばしっこくて捕まらない」→送られてきた衝撃姿が320万表示!
- 顔の半分は童顔メイク、もう半分の仕上がりに驚がく 同一人物と思えない半顔メイクが860万再生「凄いねメイクの力」
- 元「AKB48」メンバー、整形に250万円の近影に驚きの声「整形しすぎてて原型なくなっててびびった」
- スーパーで買ったレモンの種が1年後…… まさかの結果が635万再生「さっそくやってみます」「すごーい!」「手品みたい」
- 庭に植えて大後悔した“悪魔の木”を自称ポンコツ主婦が伐採したら…… 恐怖のラストに「ゾッとした」「驚愕すぎて笑っちゃいましたw」
- 小1娘、ペンギンの卵を楽しみに育ててみたら…… 期待を裏切る生き物の爆誕に「声出して笑ってしまったw」「反応がめちゃくちゃ可愛い」
- 生後2カ月の赤ちゃんにママが話しかけると、次の瞬間かわいすぎる反応が! 「天使」「なんか泣けてきた」と癒やされた人続出
- 「歩行も困難…言動もままならず」黒沢年雄、妻・街田リーヌの病状明かす 介護施設入所も「急激に壊れていく…」
- 車検に出した軽トラの荷台に乗っていた生後3日の子猫、保護して育てた3年後…… 驚きの現在に大反響「天使が女神に」「目眩が」
- 「虎に翼」、新キャラの俳優に注目が集まる 「綺麗な人だね」「まさか日本のドラマでお目にかかれるとは!」
- 釣りに行こうとしたら、海岸に子猫が打ち上げられていて…… 保護後、予想だにしない展開に「神様降臨」「涙が止まりません」
- 身長174センチの女性アイドルに「ここは女性専用車両です!!!」 電車内で突如怒られ「声か、、、」と嘆き 「理不尽すぎる」と反響の声
- 築152年の古民家にある、ジャングル化した水路を掃除したら…… 現れた驚きの光景に「腰が抜けました」「ビックリ!」「先代の方々が」
- 「葬送のフリーレン」ユーベルのコスプレがまるで実写版 「ジト目が完璧」と27万いいねの好評