楽器音作成楽器音特徴抽出课件.pptVIP

楽器音オントロジー作成のための楽器音特徴抽出 北原 鉄朗† 後藤 真孝‡ 奥乃 博† †東京理科大学理工学部情報科学科 ‡電子技術総合研究所／科技団さきがけ21 発表の流れ 本研究の目標と今回の目的 なぜ オントロジーなのか 音源同定における問題点 提案： 基本周波数による特徴量テンプレートの選択 特徴量抽出とその後の処理 基本周波数による音色変化の考察 実験・実験結果 まとめ 1. 本研究の目標と今回の目的 目標 音源同定の観点から, 楽器音オントロジー 構築の具体的な方法論を確立する. 今回の目的 特徴量抽出を行い, 特徴量を検討, 基本周波数によって特徴量テンプレートを 切り替えることの必要性を指摘. 2. なぜ オントロジーなのか 既存の研究では, 楽器の種類を限定 → 現在, 任意の楽器を対象とした研究は存在せず 楽器の性質は, 階層的な定義が可能 → 楽器を限定しないためには階層的知識表現が必要 オントロジー（内容重視の階層的知識表現）が不可欠 3. 音源同定における問題点 楽器が同じであれば, 特徴量は同じ値を示すのか? (特徴量・・・その楽器に特有な値を示す物理量) 同じ楽器であっても, 音高・音の強さ・ 楽器の個体差・演奏方法によって, 特徴量は大きく変化する. No! 今回は, 音高（基本周波数）による特徴量変化に着目 4. 提案： 基本周波数による 特徴量テンプレートの選択 1) 対象音域をいくつかに分割, 音域ごとに 特徴量テンプレートを作成 (特徴量テンプレート・・・各楽器のさまざまなサンプルから 抽出された特徴量の集合) 入力信号の基本周波数が属している 音域の特徴量テンプレートを選択 周波数[Hz] 110 220 440 880 RL RM RH 対象音域 発表の流れ 本研究の目標と今回の目的 なぜ オントロジーなのか 音源同定における問題点 提案： 基本周波数による特徴量テンプレートの選択 特徴量抽出とその後の処理 基本周波数による音色変化の考察 実験・実験結果 まとめ 5. 特徴量抽出とその後の処理 ① 高調波成分の取得 (単音に対して, 基音・高調波の 周波数と音量の時間的変化を推定) ② アタック区間とサスティン区間の取得 ③ 特徴量抽出 ④ 基本周波数による特徴量テンプレート選択 ⑤ 重み値と類似度の計算 5. 特徴量抽出とその後の処理 ① 高調波成分の取得 (単音に対して, 基音・高調波の 周波数と音量の時間的変化を推定) ② アタック区間とサスティン区間の取得 ③ 特徴量抽出 ④ 基本周波数による特徴量テンプレート選択 ⑤ 重み値と類似度の計算 アタック区間とサスティン区間 5. 特徴量抽出とその後の処理 ① 高調波成分の取得 (単音に対して, 基音・高調波の 周波数と音量の時間的変化を推定) ② アタック区間とサスティン区間の取得 ③ 特徴量抽出 ④ 基本周波数による特徴量テンプレート選択 ⑤ 重み値と類似度の計算 ③ 特徴量抽出 各倍音の平均のパワー （10次倍音まで） 各倍音の音量・周波数の時間的変化 （次ページ参照） (3) 全体の音量の時間的変化 (LSMによる近似直線の傾き・変調の振動数と振幅） (4) その他 （周波数重心・累積パワーが80%を超える倍音次数） 各倍音の音量・周波数の時間的変化 音量がはじめて最大の90%になる時刻 音量が最大になるときの時刻 最大音量と平均の音量との差 アタック区間での音量変化の分散 音量変化のLSMによる近似直線の傾き 音量に関する変調の振動数と振幅 周波数変調の振動数と振幅 各倍音の音量・周波数の時間的変化 a)~g)の9個×10倍音=90個の特徴量を 倍音次数に関する関数ととらえ抽象化 LSMによる近似直線の傾き 近似直線の誤差の分散 近似直線が, 誤差の標準偏差を超える点の個数 近似直線が, 誤差の標準偏差の2倍を超える点の個数 各倍音の音量・周波数の時間的変化 5. 特徴量抽出とその後の処理 ① 高調波成分の取得 (単音に対して, 基音・高調波の 周波数と音量の時間