紙を指でなぞると情報をスキャン 次世代のタッチユーザーインタフェース
紙や本を指でなぞると情報を読み取って電子データにできる――カメラとプロジェクターを使ったシステムを富士通研究所が開発した。
富士通研究所は、紙や本など実世界にあるものを指で直接選択するだけでデータのやり取りを可能にするシステムを開発しました。
紙やいろいろな物がタッチパネルのように触って操作ができると考えています。この装置は、特別なハードウェアは一切使っていなくて、通常のWebカメラ相当のものと市販のプロジェクターのみで構成して、画像処理の技術を使ってこの機能を実現しています。
この技術を用いることで、書類を指でなぞって必要な箇所を電子データとして取り込むことができます。
操作対象となる実世界の物体の形状を計測し、カメラとプロジェクターと実世界の3つの座標系を自動で調整する技術により、テーブルや紙など平坦な面だけでなく、厚みのある本などの歪んだ面であってもタッチと表示を正確に合わせることが可能です。
今までの手の動きを使ったジェスチャー操作は、ジェスチャーでパソコンやいろいろな機器を操作するといったものが多かったと思いますが、こちらはパソコンの操作をするものではなくて、直接実際のものに触って、その物とICTの機器を融合させようというインタフェースになっています。
通常のテーブルの上でのアナログ的な操作の時には反応しないようにしています。1本指を出すと操作が可能になります。ということで、アナログの作業とデジタル機器への操作を融合させるようなインタフェースになっています。
正確なタッチの検出には指先の高さを正確に検出する必要があります。特に今回使っているカメラ(320×180)では、指先の検出が1画素ずれるだけで、高さが1センチ変化してしまうため、精度の高い指先認識技術が必要です。
低解像度のWebカメラを使っていて画像が粗いんですが、それを画像処理で補間することで高精度な3次元位置を計算しています。
また、周囲の環境光に応じた色や明るさの制御と手の色の個人差を補正する技術により、環境や個人差の影響の少ない安定した手指の抽出を実現しています。
さらにタッチを用いない空間でのジェスチャー操作も可能です。このデモでは、握った状態の手を動かすと3次元CADデータの視点を操作できます。このような既存のジェスチャー操作と今回のタッチ操作を組み合わせたようなアプリケーションも考えられます。
例えば旅行会社のカウンターであったり、役所などで申請書を書くような場所で詳しい情報を表示したりといった用途があるかなと思います。
2014年度の製品化をめどに開発を行っています。まだデモンストレーションレベルで実際の現場で使って頂いていないので、現場の方々に実際に使って頂いて課題を抽出してユーザビリティの評価を行って、この装置に反映していきたいと思っています。
関連記事
- いつもより多く回しております:皿回しのようにタブレットをグルグル 回転で操作するインタフェース
「Whirled Worlds」は、タブレットを皿回しのように回したり、スマホをひもの先に付けて回転させてアプリやゲームを操作できるインタフェース。 - まるで「マイノリティ・リポート」 空中の映像をジェスチャーで動かす技術、ロシア企業が開発
空中の映像を触って動かしているように見える技術を、ロシアのDisplAirという企業が開発した。デモ動画が未来的だ。 - CEDEC 2011:触られてないのにくすぐったい感覚 触覚デバイスの未来を見てきた
iPhoneの画面を触ると、手のひらにくすぐられたような感覚が――リアルな触覚を再現するデバイスの研究成果が、CEDEC 2011で発表されている。 - あの“梶本研究室”に行ってみた(後編):ゲームと「触覚」は相性がいい? 触覚デバイスがもたらすコミュニケーションの未来像とは
なぜ「触覚デバイス」は普及していないのだろうか。後編となる今回は、学生たちを指導する梶本裕之先生に、触覚デバイスの課題や、触覚研究の可能性についてうかがった。 - あの“梶本研究室”に行ってみた(前編):「遠隔地とキス」を発展させると「どこでもドア」になる? 触覚デバイスがもたらすコミュニケーションの未来像とは
電気通信大学のある学生が「遠隔地の相手とキスができるデバイス」を作った。電話やビデオチャットでは伝わらない「触覚」を、もし遠距離の相手に伝えられるとしたら――。同デバイスを開発した、電気通信大学 梶本研究室に「触覚デバイス」の未来を聞いた。
Copyright(c) Digitized Information, Inc. All Rights Reserved.
-
1歳赤ちゃん、寝る時間に現れないと思ったら…… 思わぬお仲間連れとご紹介が「めっちゃくちゃ可愛い」と220万再生
-
【今日の計算】「8+9÷3−5」を計算せよ
-
「プロ野球チップス」で誤字 伊藤大海投手を「176m」と記載してカルビー謝罪
-
「ママ友襲来10分前」→さぁ、どうする……? 大爆笑の“あるある”再現が400万再生突破「腹ちぎれました」「バナナ食べんでもええやん」
-
富山県警のX投稿に登場の女性白バイ隊員に過去一注目集まる「可愛い過ぎて、取締り情報が入ってこない」
-
21歳の無名アイドル、ビジュアル拡散で「あの頃の橋本環奈すぎる」とSNS騒然 「実物の方が可愛い」「見つかっちゃったなー」の声も
-
「大型魚の餌に!!」 熱帯魚店の“思わず目を疑うPOP”に恐怖 「サメでも飼うの?」
-
2カ月赤ちゃん、おばあちゃんに手をスリスリされた瞬間…… 愛と幸せあふれる空間に笑顔になる「これぞ天使だ」
-
漂う違法感 東京に戻る息子へ持たせた“大量のブツ”に「九州人あるある」「帰省からの帰りいつもこれ」の声
-
異世界転生したローソン出現 ラスボスに挑む前のショップみたいで「合成かと思った」「日本にあるんだ」
- 生後2カ月の赤ちゃんにママが話しかけると、次の瞬間かわいすぎる反応が! 「天使」「なんか泣けてきた」と癒やされた人続出
- 車検に出した軽トラの荷台に乗っていた生後3日の子猫、保護して育てた3年後…… 驚きの現在に大反響「天使が女神に」「目眩が」
- 安達祐実、成人した娘とのレアな2ショット披露 「ママには見えない!」「とても似ててびっくり」と驚きの声
- 兄が10歳下の妹に無償の愛を注ぎ続けて2年後…… ママも驚きの光景に「尊すぎてコメントが浮かばねぇ」「最高のにいに」
- “これが普通だと思っていた柴犬のお風呂の入れ方が特殊すぎた” 予想外の体勢に「今まで観てきた入浴法で1番かわいい」
- 「虎に翼」、新キャラの俳優に注目が集まる 「綺麗な人だね」「まさか日本のドラマでお目にかかれるとは!」
- 「葬送のフリーレン」ユーベルのコスプレがまるで実写版 「ジト目が完璧」と27万いいねの好評
- お花見でも大活躍する「2杯のドリンクを片手で持つ方法」 目からウロコの裏技に「えぇーーすごーーい」「やってみます!」
- 弟から出産祝いをもらったら…… 爆笑の悲劇に「めっちゃおもろ可愛いんだけどw」「笑いこらえるの無理でした」
- 3カ月の赤ちゃん、パパに“しーっ”とされた反応が「可愛いぁぁぁぁ」と200万再生 無邪気なお返事としぐさから幸せがあふれ出す
- フワちゃん、弟の結婚式で卑劣な行為に「席次見て名前覚えたからな」 めでたい場でのひんしゅく行為に「プライベート守ろうよ!」の声
- 親が「絶対たぬき」「賭けてもいい」と言い張る動物を、保護して育ててみた結果…… 驚愕の正体が230万表示「こんなん噴くわ!」
- 水道検針員から直筆の手紙、驚き確認すると…… メーターボックスで起きた珍事が300万再生「これはびっくり」「生命の逞しさ」
- フワちゃん、収録中に見えてはいけない“部位”が映る まさかの露出に「拡大しちゃったじゃん」「またか」の声
- スーパーで売れ残っていた半額のカニを水槽に入れてみたら…… 220万再生された涙の結末に「切なくなった」「凄く感動」
- 桐朋高等学校、78期卒業生の答辞に賛辞やまず 「只者ではない」「感動のあまり泣いて10回読み直した」
- 「これは悲劇」 ヤマザキ“春のパンまつり”シールを集めていたはずなのに…… 途中で気づいたまさかの現実
- 「ふざけんな」 宿泊施設に「キャンセル料金を払わなくする方法」が物議 宿泊施設「大目に見てきたが厳格化する」
- がん闘病中の見栄晴、20回以上の放射線治療を受け変化が…… 「痛がゆくなって来ました」
- 食べ終わったパイナップルの葉を土に植えたら…… 3年半後、目を疑う結果に「もう、ただただ感動です」「ちょっと泣きそう」