语言的相互信息论.pdfVIP

维普资讯 第 7卷 第 2期 大连海事大学学报(社会科学版) VoI．7，No．2 2008年 4月 JournalofDalianMaritimeUniversity(SocialSciencesEdition) Apr．2008 文章编号：1671．7031(2008)02．0103．03 语言的相互信息论 周世界 ，张晓平 (大连海事大学 外国语学院，辽宁 大连 116026) 摘要：在阐述信息论的基础上，以英语单词take为例，对单词 符号之间相互传递信息是语言本身的基本特征之 之间的搭配力进行分析，得出相互信息值在研究词语搭配方 一 ，在衡量语言符号之间相互关联的诸多统计方法 面具有独特优势的结论。最后论述相互信息值在语料库语 中，相互信息 (mutualinformation)具有独特的优势。 言学的搭配研究中也存在不足的问题。 本文基于信息论和统计学，旨在阐述相互信息的基 关键词 ：相互信息；语料库 ；搭配 本原理、特征及在语料库语言学中的应用优势。 中图分类号：H041 文献标识码 ：A 一 、 信息与相互信息 M utualinformation in language 语言是符号系统。语言使用者利用不同的符号 ZHOUShi-jie，ZHANGXiao-ping 发出信号传递信息。语言符号有大小层次之分，小 (CollegeofForeignLanguages，DalianMaritimeUniv．， 语言符号之间相互组合构成大语言符号，如字母组 Dalian116026，China) 成单词、单词组成短语或句子，等等。在理论上，当 Abstract：Thepaper，basedontheinformationtheory，withthe 语言没有任何语法规则、语言符号不受任何限制而 Englishword “take”aSanexample。wasfocusedonthestrength 随意组合时，语言符号提供的信息量为最大。在这 ofrelationshipbetweenwords．Itisconcluded thatthemutual 种情况下，任何一个字母、单词等语言符号与其他的 infomr ationpossessessomeadvantagesoverotherstatisticalmea- 语言符号具有相同的出现频率，任何一个符号都可 sures，anddisadvantages aswell，intheconcordanceofcolloca— 以与另外一个语言符号共现在一起，从而产生下列 tionsincorpuslinguisties． 零序概算 (zero．orderapproximation)…的例子 ： Keywords：mutualinformation；ocrpus；collocation xfomlrxkhrjffjujzlpwcfwkcyffjeyvkcqsghyd 然而，现实生活中的语言都具有一定程度 的语 看到下列残缺不全的句子 ，依据经验很容易推 法规则。在语言的实际使用中，