ロボホンは手話通訳を覚えた! AIを活用した手話認識アプリをシャープらが共同開発

未来感ある!

» 2017年11月08日 15時55分 公開
[高橋ホイコねとらぼ]

 NTTデータ、シャープ、NTTデータSBCはロボホン向け手話通訳アプリケーションを共同開発したと発表しました。スマートフォンアプリを併用する事で、手話をチャットのように文字化することも可能になります。

ロボホンができるよとしゃべる ロボホンが通訳してくれます

 ロボホンに手話で話しかけると、意味する単語をロボホンが発話し背面の液晶にも単語が表示されます。スマートフォン等の外部デバイスにも手話がチャットのように表示されます。

ロボホンに向かって手話をする人 ロボホンに向かって「よろしく」と手話をすると

ロボホンの背面に「よろしく」と表示 声で「よろしく」と通訳、背面液晶にも「よろしく」と表示

スマホ画面 会話をスマホに表示することもできる

 健聴者がロボホンに声で話しかければ、音声が文字化され背面液晶に表示。こちらもスマートフォン等に会話が表示されます。

コミュニケーション方法を図解 ロボホンの手話通訳機能を図解

 このアプリケーションはNTTデータ社内のロボホン向けアプリ開発コンテストがきっかけで開発されました。AI技術(ディープラーニング)を使って画像解析を行うことで、手話を理解しています。現段階では、手話初学者の手話練習や単語レベルでの意思伝達を必要とする場での利用を想定していますが、今後は一連の手話を認識し簡単な会話での意思伝達交換、行政や企業の窓口対応までできるようにしたいとのこと。さまざまな場面で手話通訳が円滑に行われるように1日でも早い実用化を目指すそうです。

 以前、ロボホンには「すれ違い顔認識呼びかけ機能が視覚障がい者に重宝されている」という誤解が流れ、それに対しシャープ公式Twitterアカウントが新規アプリとして対応すると答えたことが話題となりました(関連記事)。同アカウントではその後「ロボホンがハンディキャップある方たちのお役に立てるような取り組みにできるだけ注力していきたい。」とツイートしていました。

高橋ホイコ

関連キーワード

RoBoHoN | 手話 | アプリケーション


Copyright © ITmedia, Inc. All Rights Reserved.

先週の総合アクセスTOP10
  1. 生後2カ月の赤ちゃんにママが話しかけると、次の瞬間かわいすぎる反応が! 「天使」「なんか泣けてきた」と癒やされた人続出
  2. 車検に出した軽トラの荷台に乗っていた生後3日の子猫、保護して育てた3年後…… 驚きの現在に大反響「天使が女神に」「目眩が」
  3. 安達祐実、成人した娘とのレアな2ショット披露 「ママには見えない!」「とても似ててびっくり」と驚きの声
  4. 兄が10歳下の妹に無償の愛を注ぎ続けて2年後…… ママも驚きの光景に「尊すぎてコメントが浮かばねぇ」「最高のにいに」
  5. “これが普通だと思っていた柴犬のお風呂の入れ方が特殊すぎた” 予想外の体勢に「今まで観てきた入浴法で1番かわいい」
  6. 「虎に翼」、新キャラの俳優に注目が集まる 「綺麗な人だね」「まさか日本のドラマでお目にかかれるとは!」
  7. 「葬送のフリーレン」ユーベルのコスプレがまるで実写版 「ジト目が完璧」と27万いいねの好評
  8. お花見でも大活躍する「2杯のドリンクを片手で持つ方法」 目からウロコの裏技に「えぇーーすごーーい」「やってみます!」
  9. 弟から出産祝いをもらったら…… 爆笑の悲劇に「めっちゃおもろ可愛いんだけどw」「笑いこらえるの無理でした」
  10. 3カ月の赤ちゃん、パパに“しーっ”とされた反応が「可愛いぁぁぁぁ」と200万再生 無邪気なお返事としぐさから幸せがあふれ出す
先月の総合アクセスTOP10
  1. フワちゃん、弟の結婚式で卑劣な行為に「席次見て名前覚えたからな」 めでたい場でのひんしゅく行為に「プライベート守ろうよ!」の声
  2. 親が「絶対たぬき」「賭けてもいい」と言い張る動物を、保護して育ててみた結果…… 驚愕の正体が230万表示「こんなん噴くわ!」
  3. 水道検針員から直筆の手紙、驚き確認すると…… メーターボックスで起きた珍事が300万再生「これはびっくり」「生命の逞しさ」
  4. フワちゃん、収録中に見えてはいけない“部位”が映る まさかの露出に「拡大しちゃったじゃん」「またか」の声
  5. スーパーで売れ残っていた半額のカニを水槽に入れてみたら…… 220万再生された涙の結末に「切なくなった」「凄く感動」
  6. 桐朋高等学校、78期卒業生の答辞に賛辞やまず 「只者ではない」「感動のあまり泣いて10回読み直した」
  7. 「これは悲劇」 ヤマザキ“春のパンまつり”シールを集めていたはずなのに…… 途中で気づいたまさかの現実
  8. 「ふざけんな」 宿泊施設に「キャンセル料金を払わなくする方法」が物議 宿泊施設「大目に見てきたが厳格化する」
  9. がん闘病中の見栄晴、20回以上の放射線治療を受け変化が…… 「痛がゆくなって来ました」
  10. 食べ終わったパイナップルの葉を土に植えたら…… 3年半後、目を疑う結果に「もう、ただただ感動です」「ちょっと泣きそう」