ろう・難聴者とのコミュニケーションのためのリアルタイム字幕を表示する透明ディスプレイ
音声認識を使ったリアルタイム文字起こしは,声を聞き取りづらい人の日常生活を支援する重要なツールとなりつつある。より良いコミュニケーションを図るためには,表情や身振り手振りなどのボディーランゲージを用い,誤認識を防ぎながら快適に利用できるシステムが必要だ。そこで,透明ディスプレイを利用したリアルタイム文字起こしのシステムを提案する。このシステムでは,自動音声認識の誤認識を話し手が確認するために,文字起こしの結果がディスプレイの両側に向けて表示される。また,透明度の高いディスプレイにより,ボディーランゲージと文字の両方を確認しながら会話を行うことができる。
著者: 山本健太*,鈴木一平*,設楽明寿*,落合陽一(3人の筆頭著者による研究)
機材提供(透明ディスプレイ):株式会社ジャパンディスプレイ
https://digitalnature.slis.tsukuba.ac.jp/2021/02/see-through-captions/