「映像を見て感じたこと」を脳から読み解き言語化する技術開発 コンテンツの評価手段として応用
発話や筆談が困難な人に向けた、コミュニケーション技術としての応用も進められています。
» 2017年11月02日 09時00分 公開
[沓澤真二,ねとらぼ]
情報通信研究機構(NICT)が、脳が映像から感じた内容を読み解き、名詞・動詞・形容詞の形で言語化する「脳情報デコーディング技術」の開発に成功しました。例えば、被験者がCMを見たときに感じたことを推定し、「女性」「走る」「優しい」といった言葉として出力します。
過去にも同様の試みがなされたことはありましたが、脳から解読できた内容は約500語。今回は1万語に対応する内容が解読できるようになり、さらに従来はできなかった、「印象」を形容詞として読み解くことが可能となりました。
advertisement
開発においては、脳活動の解読装置であるデコーダーに、大規模なテキストデータから学習された「言語特徴空間」を導入。言語特徴空間では1万語の単語が、意味的な近さ・遠さをもとにして100次元の座標上に配されています。
被験者が映像を見ると、脳の反応が言語特徴空間のどの位置に対応するかデコーダーが解読。座標上で一番近い単語を「もっともらしい」言葉として抽出し、映像を見て感じた内容の推定結果として出力します。
同技術は既に2016年度よりNICTからNTTデータへライセンス提供され、CMなどの映像コンテンツ評価サービスに用いられています。今後は精度の向上を目指すとともに、推定された脳活動の内容がどのように個性や購買行動と結びつくのかといった点についても検証が行われる予定。また、発話や筆談が困難な人に向け、発話を介しないコミュニケーション技術としての応用も進められています。
(沓澤真二)
advertisement
Copyright © ITmedia, Inc. All Rights Reserved.
昨日の総合アクセスTOP10
鮮魚店で瀕死の“巨大ガニ”を購入→家に連れて帰り、お風呂場に放ってみると…… まさかの展開に「こわっww」と800万表示
雑草ボーボーの荒れ地に“牛3頭”を放牧→2週間後…… まさかの光景に「感動しました」「いい仕事してますねぇ~!!」
5歳のときにトレーニングを始めた女の子→3年後…… 現在の姿が「ハハハすごすぎる」「めちゃくちゃ尊敬」と250万再生【海外】
古いタオルを手で裂いていくだけで→「すごい…」「意外!」便利アイテムに! 生活の質“爆上がり”アイデアが話題
「夢見たディスプレイ」空中浮遊するガンダムのプラモデル、その仕組みは…… “122時間”かけて作った超大作が40万再生「マジで感激」
海外で暮らすパパとビデオ通話中、1歳娘がとったけなげな“行動” 大反響から約1年後……家族の現在を聞いた
←夫に出すやつ 自分で食べるやつ→ 目を疑うレベルの“落差”に爆笑「わ~おw」「なんかとんでもないのいた」
妻「“157センチ、43キロが理想”と言う夫に、かわいいと言われたい」→プロに依頼したら…… 「エグッ!」「黒木瞳さんかと」
伸び放題になった実家の庭木→50代女性が2日間どんどん切ったら…… “見違える光景”に「さすがですね!」「明日は我が身」
最初に軽く結ぶだけで…… 2000万再生された“マフラーの巻き方”に反響「これは使える」「素晴らしいアイデア」【海外】
先週の総合アクセスTOP10
- パパに抱っこされる娘、13年後の成人式に同じ場所とポーズで再現したら…… 「お父さん若返った?笑」「時止まってる」2人の姿に驚き
- 古いバスタオルをザクザク切って縫い付けると…… 目からウロコの再利用に「すてきなアイデア」【海外】
- 14歳のとき、親友の兄と付き合うことになった女性→13年後…… “まさかの結末”に「韓国ドラマみたい」【海外】
- リンゴを1年間、水の中で放置→顕微鏡で見てみたら…… 衝撃の実験結果に「これはすごい」「息をのみました」【海外】
- 海釣り中、黒猫に「ちょっと来い」と呼び出された釣り人 → 付いて行くと…… 運命のような保護から2年、飼い主に話を聞いた
- “駐車場2台分”の土地に、建築家の夫が家を建てたら…… “とんでもない空間”に驚き「すごい。流行る」
- 「なんだこの暗号は……」 マクドナルドの“大人だけが読めるメッセージ”が410万表示「懐かしい~」「読める人同世代w」
- 着陸する戦闘機を撮ったはずが…… タイミングが絶妙すぎる1枚に「一部の専門家には貴重な一枚」 投稿者に話を聞いた
- ズボラ母が5人分サンドイッチを爆速で作ったら…… 目からウロコの時短テクと美しい仕上がりに「信じられない」
- 【今日の計算】「7-2×0+9」を計算せよ
先月の総合アクセスTOP10
- ドブで捕獲したザリガニを“清らかな天然水”で2週間育てたら…… 「こりゃすごい」興味深い結末が195万再生「初めて見た」
- 「配慮が足りない」 映画の入場特典で「おみくじ」配布→“大凶”も…… 指摘受け配給元謝罪「深くお詫び」
- 母「昔は何十人もの男性の誘いを断った」→娘は疑っていたが…… 当時の“モテ必至の姿”が1170万再生「なんてこった!」【海外】
- 風呂に入ろうとしたら…… 子どもから“超高難易度ミッション”が課されていた父に笑いと同情 「父さんはどのようにしてこのお風呂に入るのか」
- 母親から届いた「もち」の仕送り方法が秀逸 まさかの梱包アイデアに「この発想は無かった」と称賛 投稿者にその後を聞いた
- 市役所で手続き中、急に笑い出した職員→何かと思って横を見たら…… 衝撃の光景が340万表示 飼い主にその後を聞いた
- 「ごめん母さん。塩20キロ届く」LINEで謝罪 → お母さんからの返信が「最高」「まじで好きw」と話題に
- DIYで室温が約10℃変わった「トイレの寒さ対策」が310万再生 コスパ最強のアイデアへ「天才!」「これすごくいい」
- 「こんなおばあちゃん憧れ」 80代女性が1週間分の晩ご飯を作り置き “まねしたくなるレシピ”に感嘆「同じものを繰り返していたので助かる」
- 岡田紗佳、生配信での発言を謝罪 「とても不快」「暴言だと思う」「残念すぎ」と物議