下載 - 台大語音處理實驗室Lecture corpus簡介.pptVIP

台大課程語料的韻律組織與特性 中央研究院語言學研究所語音實驗室 鄭秋豫 研究（討論）重點 1. 語料──需對語料有較全面的瞭解 2. 語感──需培養對語言、語音的靈敏度 3. 角度──如何找到一個可以檢測的韻律現象 從不同的觀察角度切入語料 從不同大小的取樣單位檢視語料 從信號的相對性測量並檢驗prosody的效應 4. 解釋──如何從分析得到的結果增加對prosody的瞭解進而建立模型 課程名稱: 數位語音處理（Digiatal Speech Processing） SpeechTube網址: .tw/~duidae/interface/mytesttube/ 15堂課，45節課，約45小時 語料內容： 45 waves 45 transcriptions Recording Setting of NTU Lecture Corpus Equipment Software: CoolEdit 2000 format Sample rate: 44.1 KHz Channels: Stereo Resolution: 16 bit 台大課程語料總覽 台大課程語料內容 介面（1/2） 介面2 Speech Samples of Spontaneous Classroom Lecture 那麼這個做法呢就是我重新定義這個東西叫做 d sub i 的 這個 x 是我一堆 training data 的 observation 這個 lambda 是我原來已經 train 好的 model 我們剛才說我的我假設我零到九好了零到九我每一個 model 每一個數字零或者一或者二都是一個 class 都有一個 model 就是 lambda i 然後我的所有的 lambda i 構成一大把的 model 就是我的大 lambda 所以這個大 lambda 就是我已經原來已經 train 好的那一堆 model 那一堆大 lambda 已經 train 好的 model 之後我現在一個新的一個 observation 譬如說是 七進來的時候呢我就可以 define 一個 d sub i 的這個東西 那它是什麼呢它是長這樣的一個東西 NTU課程語料特點 1. 前處理十分困難需要協助 中英夾雜 語者以中文表達為主，而課程投影片幾乎以英文撰寫，因此在口語表達的過程中，英文主要出現在專有名詞（如：language model）和語者的口語習慣詞彙（如：ok） 2. 語料觀察 paralinguistic副語言成分中，情感表達性副語言現象（如：笑、哭等情緒表現與情感交流意圖）較一般對話（spontaneous dialogue）少很多，acoustic phonetics分析較單純。 non-linguistic非語言成分（如咳嗽、清喉嚨、其他環境的聲響）都不多，就非隔音室收音而言，是很乾淨的語音。但背景雜音多，不若隔音室語音來得乾淨，需作聲學語音分析後才能得知是否影響標註。 語料特性初步觀察（1/3） 本語料最大的特性是prosody訊息極為明確，語者咬字清晰、語段分明，higher level discourse unit極為明確，是利用prosody研究discourse unit、discourse speech planning、discourse automatic segmentation極好的素材。 副語言現象與非語言現象較一般對話spontaneous dialogue少很多，acoustic phonetic分析部分也較單純。 語料特性初步觀察（2/3） Segmental tier 音節壓縮（syllable contraction）現象普遍, 造成詞彙中的音段減少(segment reduction)與合併(merge)。 中英文夾雜普遍，英文詞匯的音節壓縮造成的音段減少與合併和中文部分相同。 且有音節減少(syllable reduction)的現象，推測原因是維持韻律的流暢、牽就中文韻律結構的節奏所致，應可繼續檢測。 以上現象均無損於聽者的理解，推測主要原因是由於speech prosody非常清楚，discourse unit脈絡分明，與音段互補。 Supra-segmental tier 流暢度高。 speech prosody中的discourse unit及段落較一般對話更為明顯，顯示語者的口語規劃單位是discourse，主要原因應為語者表達的目標，是訊息意圖及語意連貫及完整，意在凸顯語意的連結及關連及大單位（語段）完整語意的表達。 speech prosody語段結構完整，起承轉合與語意連貫一致，語段內關聯性亦強，有特定主題與呈現順序。 focus明顯，其體現策略