Specmurtを利用した調波構造行列による 混合楽音解析の検討 日本音響学会2013年春季研究発表会 1-P-11 西村大樹 ･ 中鹿亘 ･ 滝口哲也 ･ 有木康雄 （神戸大） 従来手法 概要 Specmurt法 和音情報u(x)と楽器情報h(x)の畳み込みで 観測情報v(x)を表現できる [S. Saito, 2008] 混合音解析とは 同時刻に様々な楽器が存在する信号の解析 より、 ・・・ と計算でき、 が既知であるならば 、 、 をフーリエ変換したものを 、 、 とすると . で和音情報は求められる Score Wav data Spectrum 研究背景 耳による楽曲の解析は非常に困難 楽音解析による解析結果の応用例 単一楽器の多重音のみ解析可能 人手でも不可能ではないが、かなりの経験、労力、時間を要する 同時刻に存在する各楽器に対応する 基本周波数分布を求められない 音楽検索、著作権違反の盗作楽曲検出 Wav data Score 提案手法 + + . . 観測スペクトル行列 . + 観測スペクトルを各楽器の観測スペクトルの和と表現 調波構造行列 基本周波数行列 各楽器はその基本周波数分布と調波構造の畳み込みで表現 ただし 両辺をフーリエ変換 疑似逆行列でRについて解いて 各楽器の基本周波数分布 は全て未知 各楽器の基本周波数分布を得る 未知部分をまとめて行列表現 評価実験 今後の課題 実験結果 ピアノとバイオリンを同時に鳴らした約1.0秒の混合楽音 エンベロープの違いが原因と思われる誤り (時間による変化を考慮した特徴量の導入) 調波構造が既知 (調波構造が未知でも対応できる解析手法の検討) (ピアノ、バイオリンの調波構造はそれぞれ既知) ピアノの基本周波数 (A3) バイオリンの基本周波数 (E4) A7 A7 A7 A6 A6 A6 A5 A5 A5 ① A4 A4 A4 Power ④ A3 A3 A3 ② ⑤ ③ ⑥ 0.0 0.2 0.4 0.6 0.8 1.0 0.0 0.2 0.4 0.6 0.8 1.0 0.0 0.2 0.4 0.6 0.8 1.0 Time [sec] (①: attack level, ②: attack time, ③: decay time, ④: sustain level, ⑤: sustain time, ⑥: release time) Time [sec] Time [sec] Time Analysis result (piano) Observed spectrum Analysis result (violin) Envelope 2013 Spring Meeting of ASJ. (C) CS17, Kobe University.