ニュース
» 2013年04月16日 10時27分 公開

紙を指でなぞると情報をスキャン 次世代のタッチユーザーインタフェース

紙や本を指でなぞると情報を読み取って電子データにできる――カメラとプロジェクターを使ったシステムを富士通研究所が開発した。

[DIGINFO TV]
DIGINFO TV

 富士通研究所は、紙や本など実世界にあるものを指で直接選択するだけでデータのやり取りを可能にするシステムを開発しました。

紙やいろいろな物がタッチパネルのように触って操作ができると考えています。この装置は、特別なハードウェアは一切使っていなくて、通常のWebカメラ相当のものと市販のプロジェクターのみで構成して、画像処理の技術を使ってこの機能を実現しています。

 この技術を用いることで、書類を指でなぞって必要な箇所を電子データとして取り込むことができます。

 操作対象となる実世界の物体の形状を計測し、カメラとプロジェクターと実世界の3つの座標系を自動で調整する技術により、テーブルや紙など平坦な面だけでなく、厚みのある本などの歪んだ面であってもタッチと表示を正確に合わせることが可能です。

今までの手の動きを使ったジェスチャー操作は、ジェスチャーでパソコンやいろいろな機器を操作するといったものが多かったと思いますが、こちらはパソコンの操作をするものではなくて、直接実際のものに触って、その物とICTの機器を融合させようというインタフェースになっています。

通常のテーブルの上でのアナログ的な操作の時には反応しないようにしています。1本指を出すと操作が可能になります。ということで、アナログの作業とデジタル機器への操作を融合させるようなインタフェースになっています。

 正確なタッチの検出には指先の高さを正確に検出する必要があります。特に今回使っているカメラ(320×180)では、指先の検出が1画素ずれるだけで、高さが1センチ変化してしまうため、精度の高い指先認識技術が必要です。

低解像度のWebカメラを使っていて画像が粗いんですが、それを画像処理で補間することで高精度な3次元位置を計算しています。

 また、周囲の環境光に応じた色や明るさの制御と手の色の個人差を補正する技術により、環境や個人差の影響の少ない安定した手指の抽出を実現しています。

 さらにタッチを用いない空間でのジェスチャー操作も可能です。このデモでは、握った状態の手を動かすと3次元CADデータの視点を操作できます。このような既存のジェスチャー操作と今回のタッチ操作を組み合わせたようなアプリケーションも考えられます。

例えば旅行会社のカウンターであったり、役所などで申請書を書くような場所で詳しい情報を表示したりといった用途があるかなと思います。

2014年度の製品化をめどに開発を行っています。まだデモンストレーションレベルで実際の現場で使って頂いていないので、現場の方々に実際に使って頂いて課題を抽出してユーザビリティの評価を行って、この装置に反映していきたいと思っています。

Copyright(c) Digitized Information, Inc. All Rights Reserved.

昨日の総合アクセスTOP10

  1. /nl/articles/2009/16/news014.jpg “1日10リットル尿が出る病気”にかかった実録漫画が壮絶 「体が砂漠」「水分とトイレしか考えられない廃人化」
  2. /nl/articles/1808/22/news101.jpg 「訃報」「愛猫」「手風琴」って読める? 常用漢字表に掲載されている“難読漢字”
  3. /nl/articles/2009/17/news011.jpg 4歳児とは思えない……! 言葉巧みにレディを誘う幼児の実話漫画にやられる人続出 「ホイホイついていっちゃいそう」
  4. /nl/articles/2009/15/news124.jpg プロテインバーに虫が混入か 「大量の虫が生きたまま出てきた」動画が拡散、マイプロテインは「健康へのリスクない」
  5. /nl/articles/2009/16/news134.jpg SODが本気出してきた! セクシー女優と飲める“大人のテーマパーク”「SOD LAND」が歌舞伎町にオープン
  6. /nl/articles/2009/17/news061.jpg 「ファイナルファンタジー16」PS5で発売決定! PS5で描かれる「クリスタルの加護を断ち切るための物語」
  7. /nl/articles/1809/23/news019.jpg 炊飯器いっぱいに炊けまくった米…! 「5.5合炊いて」が生んだ悲劇に「全米が泣いた」「笑いすぎてしんどい」
  8. /nl/articles/2009/17/news012.jpg 「時計の針が進まない」単純作業の大変さ…… 日払いバイトの体験談漫画に「裏にはこんな労力が」「めっちゃわかります」
  9. /nl/articles/2009/16/news164.jpg 食材の保存方法をまとめた旭化成「冷凍・解凍チャート」が超絶便利で話題 「印刷して冷蔵庫に貼る」「攻略Wikiだ」
  10. /nl/articles/2009/17/news094.jpg 「私の肩で寝てたね!」 浜辺美波、居眠り動画で橋本環奈が想起 初対面でのかわいい失態を暴露されてしまう