培ってきた「光学的音場イメージング」技術

音を光の明るさに変換する特殊な装置を用い、ある瞬間の音の波紋を画像で記録する「光学的音場イメージング」技術の研究開発がベースにある。同技術では、測定したい音場（音が存在し、伝わっていく空間）内にレーザー光を照射し、光干渉計などを用いて、音による光の微弱な変化を検出。光の変動をカメラで撮影し、音の波を画像で可視化する。その空間分解能（識別性能）は高く、空間内の音を検出・測定する一般的な装置であるマイクロホンアレイの約100倍に及ぶ。「音の波の見える化技術」では、毎秒数千～数十万フレームの速さで撮影可能なハイスピードカメラを用いており、動画像での撮影を可能にしている。

独自の深層学習モデル

光学的なノイズを除去し、音の波のみを見える化する独自の深層学習モデルを構築。同モデルを用いて、ハイスピードカメラで撮影した動画像の中から、音の可視化品質を低下させる不要なノイズを除去している。深層学習モデルの構築にあたっては、音の物理的な性質にもとづいた演算で、訓練用の画像を人工的に生成。生成したデータセットでニューラルネットワークの学習を行った。さらに、動画像を周波数ごとに独立処理するアルゴリズムを独自に構築。従来手法を大幅に上回る、高精度なノイズ除去処理を実現している。