适合听障者国语构音及韵律矫正之训练辅具研究(I).PDF

行政院國家科學委員會專題研究計畫 期中進度報告 適合聽障者國語構音及韻律矯正之訓練輔具研究 (1/3) 計畫類別： 個別型計畫 計畫編號： NSC91-2614-E-009-001- 執行期間： 91 年 08月 01日至 92 年 07月 31日 執行單位：國立交通大學電信工程學系 計畫主持人：張文輝 報告類型： 精簡報告 處理方式： 本計畫可公開查詢 中 華 民 國 92 年 5月 26日 行政院國家科學委員會專題研究計畫期中報告 適合聽障者國語構音及韻律矯正之訓練輔具研究 (1/3) Speech Training Aids for Hearing-Impaired Mandarin Speakers 計畫編號： NSC 91-2614-E-009-001 執行期限： 91 年 8月 1日至 92 年 7月 31日 主持人：張文輝 交通大學電信工程系 教授 共同主持人：江源泉 新竹師範學院 特殊教育系副教授 共同主持人：王德譽 朝陽科技大學資訊工程系 助理教授 一、中文摘要 關鍵詞：聽 ( 障口語，語音轉換，諧波正弦分析。 ) 本計畫為三年期的第一年度計劃，結合語音轉換與語言障礙察覺分析的相關知 識，開發一種適用於聽障中文口語的構音矯正機制。其關鍵在於運用個別音節所屬 音框組合間的相關性，有效降低對應訓練所需的語料量及其收斂時間。我們已建立 的完整聽障語料庫，進行廣泛的構音聲學分析，利用諧波正弦模型分析所得的倒頻 譜係數作要素分析，再據以設計一正弦振幅對映的高斯混合模型。針對國語 68個單 音節所作的主觀聽覺測試，顯示整體辨識率由 60.88%提升至矯正後的 78.38% ，且 有效地提昇聽障語者的口語清晰度。此外，我們提出一種依據動態時間校準的時變 音長調整機制，經證實可改善合成音質使其符合常人口語之說話速度。 英文摘要 (Keywords: hearing-impaired speech, voice conversion, harmonic sinusoidal model) The speech of the hearing-impaired suffers from misarticulations and prosodic deviations due to the lack of auditory feedback. This project aims to devise a voice converter that modifies the impaired speech to be perceived as if it was uttered by a normal speaker. We applied the spectral conversion on speech signals analyzed by the harmonic sinusoidal model, in which sine-wave amplitudes and phases are chosen to be harmonic samples of the magnitude and phase spectra. In light of the low-redundancy spectral representation, we perform principal-component analyses on cepstral coefficients derived from sine-wave amplitudes. After that, the principal components are characterized under the form of a