SottoVoce

SottoVoce: 超音波画像と深層学習による無発声音声インタラクション

東京大学大学院情報学環 暦本研究室
株式会社ソニーコンピュータサイエンス研究所

採択技術名

SottoVoce: 超音波画像と深層学習による無発声音声インタラクション

採択者名

東京大学大学院情報学環 暦本研究室
株式会社ソニーコンピュータサイエンス研究所

採択年

2019年

※掲載している情報は、受賞当時の情報のため、現在は異なる場合があります。

概要

音声によって操作されるデジタル機器の利用可能性は急速に拡大しています。しかし、音声インタフェースは、公共の場での利用が困難、騒音化で精度が下がるなどの課題があります。SottoVoce (ソット・ヴォーチェ、音楽用語で 「ささやくように」)は,超音波エコー映像を用いて,利用者の無発声音声(サイレント・ヴォイス)を検出するシステムです。顎の下側に取り付けられた超音波イメージングプローブによって観察される口腔内の情報から,利用者の発話内容を深層学習によって認識します。

詳細

音声によって操作されるデジタル機器の利用可能性は急速に拡大しています。しかし、音声インタフェースは、公共の場での利用が困難、騒音化で精度が下がるなどの課題があります。SottoVoce (ソット・ヴォーチェ、音楽用語で 「ささやくように」)は,超音波エコー映像を用いて,利用者の無発声音声(サイレント・ヴォイス)を検出するシステムです。顎の下側に取り付けられた超音波イメージングプローブによって観察される口腔内の情報から,利用者の発話内容を深層学習によって認識します。将来のウェアラブルコンピュータでの入力手段として、また、有声発声が困難な方への支援技術としての発展を目指し研究を行っています。

審査講評

https://dcexpo.jp/i-tech/c/wp-content/themes/force_tcd078/img/common/no_avatar.png
審査委員

口腔内の超音波画像を深層学習を用いて分析することで、無発声発話を実現した本技術は、患者やご家族の前でのチーム医療などのサービス現場のニーズにも合致しており、社会的価値も高い。

  • おすすめ記事
  • 特集記事
PAGE TOP