See-Through Captions

ろう・難聴者とのコミュニケーションのためのリアルタイム字幕を表示する透明ディスプレイ

音声認識を使ったリアルタイム文字起こしは，声を聞き取りづらい人の日常生活を支援する重要なツールとなりつつある。より良いコミュニケーションを図るためには，表情や身振り手振りなどのボディーランゲージを用い，誤認識を防ぎながら快適に利用できるシステムが必要だ。そこで，透明ディスプレイを利用したリアルタイム文字起こしのシステムを提案する。このシステムでは，自動音声認識の誤認識を話し手が確認するために，文字起こしの結果がディスプレイの両側に向けて表示される。また，透明度の高いディスプレイにより，ボディーランゲージと文字の両方を確認しながら会話を行うことができる。

このプロジェクトは，xDiversityの取り組みのひとつとして，筑波大学デジタルネイチャー研究室（Digital Nature Group）で行っている研究です。研究内容に関する問い合わせ等は，以下をご覧ください。

See-Through Captions に関するお問い合わせ

See-Through Captions プロジェクトページ

E-mail: prj_see-through-captions<-at->digitalnature.slis.tsukuba.ac.jp
(<-at->を@に置き換えてください)
担当: 鈴木一平

Web Article

• 話した言葉を透明パネルに字幕表示　筑波大、「See-Through Captions」開発｜ITMedia 2021.03.22
• No. 305リアルタイムで会話字幕を表示する透明ディスプレイ｜知財図鑑 2021.04.15