XR技術を用いた音楽フィールドの可視化

音場の可視化は、フィールドの直感的評価に効果的です。音場を可視化するために、音響ホログラフィー、光学的方法、音の強度可視化など、さまざまな方法とシステムが研究され提案されています。特に音楽フィールドの可視化は、音楽パフォーマンスの評価、聴覚障害者への支援、芸術表現のインスピレーションに効果的です。本研究では、「OTOMIRU®」という音場可視化システムを使用します。このシステムは、16チャンネルマイクロフォンアレイ、PC上の測定システム、XR（拡張現実）デバイス上の可視化システムで構成されています。測定システムは、MVDR（最小分散非歪曲応答）ビームフォーミング法を使用してマイクロフォンアレイから録音された音源を分析します。分析結果はTCP（トランスミッションコントロールプロトコル）を介して可視化システムに送られます。最終的に、結果はカラーマップのような熱画像として可視化され、XRデバイス上の現実世界に重ね合わされます。このシステムは、主に建設現場や屋内空間でのノイズの可視化、検出、対策に使用されます。音楽フィールドを可視化するために、音圧レベルだけでなく、周波数などの他の音響パラメータも可視化するためにこのシステムを適用します。これらのパラメータを可視化すると、音場情報が詳細かつ理解しやすくなります。可視化の効率と他の状況への適用可能性を示します。