ニュース
» 2017年11月02日 09時00分 公開

「映像を見て感じたこと」を脳から読み解き言語化する技術開発 コンテンツの評価手段として応用

発話や筆談が困難な人に向けた、コミュニケーション技術としての応用も進められています。

[沓澤真二,ねとらぼ]

 情報通信研究機構(NICT)が、脳が映像から感じた内容を読み解き、名詞・動詞・形容詞の形で言語化する「脳情報デコーディング技術」の開発に成功しました。例えば、被験者がCMを見たときに感じたことを推定し、「女性」「走る」「優しい」といった言葉として出力します。


ALT 解読の1例

 過去にも同様の試みがなされたことはありましたが、脳から解読できた内容は約500語。今回は1万語に対応する内容が解読できるようになり、さらに従来はできなかった、「印象」を形容詞として読み解くことが可能となりました。

 開発においては、脳活動の解読装置であるデコーダーに、大規模なテキストデータから学習された「言語特徴空間」を導入。言語特徴空間では1万語の単語が、意味的な近さ・遠さをもとにして100次元の座標上に配されています。


言語特徴空間 言語特徴空間の概念図

 被験者が映像を見ると、脳の反応が言語特徴空間のどの位置に対応するかデコーダーが解読。座標上で一番近い単語を「もっともらしい」言葉として抽出し、映像を見て感じた内容の推定結果として出力します。


デコーダー デコーダーの仕組み

 同技術は既に2016年度よりNICTからNTTデータへライセンス提供され、CMなどの映像コンテンツ評価サービスに用いられています。今後は精度の向上を目指すとともに、推定された脳活動の内容がどのように個性や購買行動と結びつくのかといった点についても検証が行われる予定。また、発話や筆談が困難な人に向け、発話を介しないコミュニケーション技術としての応用も進められています。


(沓澤真二)


Copyright © ITmedia, Inc. All Rights Reserved.

昨日の総合アクセスTOP10

先週の総合アクセスTOP10

  1. 自分のことを“柴犬”だと思っている猫ちゃん!? 犬猫4きょうだいの息ピッタリな「いただきます」がお見事
  2. 「訃報」「愛猫」「手風琴」って読める? 常用漢字表に掲載されている“難読漢字”
  3. 仕事のLINEに「洗濯たたみましたほめてほめて!」 応募総数8000件の「LINE誤爆」最優秀作品が決定
  4. セーラームーンを自分の絵柄で描く「sailormoonredraw」チャレンジ 漫画家やイラストレーターの美麗なイラストが集まる
  5. ありま猛『連ちゃんパパ』がなぜか突然ネットで流行 「スナック菓子感覚で摂取できる地獄」など悪夢のような感想が集まる
  6. 特別定額給付金の郵送申請は「給付対象者」欄を要チェック うっかり給付金を「希望しない」に印をつけていませんか?
  7. 「家出少女を保護して数年」 有吉弘行、HKT48現役時代から投稿してきた指原莉乃との2ショットをまたも更新(2年ぶり4回目)
  8. 母「とりあえず離婚したよ」 ハッシュタグ「あなたに来たとんでもないLINE」に衝撃ツイート続々
  9. 存在しないはずの“むつ小川原コイン”の謎を追う 「陸上自衛隊で購入した」情報提供者が出現、八戸駐屯地を取材
  10. 「とがったツイートは問題視していません」 小湊鐵道公式Twitter担当者なぜ解任? 小湊鐵道に聞いた