研究概要
音環境理解から音環境場を可視化する技術の研究開発を行っています。音の大きさ、音の高低、音の単一性に関する3つの音の特徴量をRGB値に変換し、色で音を可視化する技術、「音模様」を開発しました。音模様では、例えば、あるショッピングモールガレリアのいつもの雰囲気とイベントが開催されたときの雰囲気の違いを推定できることを示しました(図1参照)。色が塗られている四角い部分は赤丸の位置に設置したマイクロフォンアレイと呼ばれる音センサで推定した音源の場所(方向)を表しています。
音模様の活用法として、場の雰囲気、つまり、音環境計測で推定できそうな場の盛り上り、コミュニケーションの活気など、その場にいる人のインタラクションの状態を表すことができるのではと考えています。また、音模様の特徴は、音環境計測で得られた音データにおいて、発話内容など、個人情報やプライバシーに関する情報にはふれずに場の雰囲気を推定するところになります。
教育・研究活動の紹介
AIでなんでも解決できてしまう潮流がある中でこの流れに乗ることは悪いことではないと思いますが、物事の判断をAIに一任するのではなく、参考程度にして自分で判断できるような知識や知見が備わる学生が育つような教育を心がけるようにしています。
今後の展望
場の雰囲気推定技術を以下のコミュニケーションの場のインタラクション評価などに活用する予定です。
社会貢献等
企業への技術の相談、コンサルなどの経験があります。コラボできそうなことがあれば、お気軽にご連絡ください。