自然语言处理之语言学基础.pptVIP

学科基础：功能语言学*社会语言学代表人物：美国社会语言学家W.Labov语言学与社会学（或人类学）的交叉性学科：研究语言的社会变体和层面，以便通过语言来识别不同社会群体。以语言学为主：联系社会因素的作用研究语言的变异。以社会学为主：研究语言和社会的各种关系，使用语言学的材料来描写和解释社会行为。（SocialNetwork？）研究方法调查：活生生（真实）的语言。描写：详细、准确。分析统计：定量分析，重视统计。（-概率性的规则）解释：转化为语言知识和语言理论的至关重要的一步。学科基础：功能语言学*篇章分析研究对象研究大于句子的话语研究实际运用的语言篇章特性基本特性：衔接性(cohesion)、连贯性(coherence)。其他特性：意图性(intentionality)、可接受性(acceptability)、信息性(informativity)、场景性(situationality)、交互动性(intertextuality)。学科基础：功能语言学连贯性（coherence）：篇章结构答：他不论干什么，都非常认真。a张三才30出头，b（而且）既没有什么学历，c又没有多少新的工作经验，d但是不论干什么，e他都非常认真，f所以，处长总是把一些重要的任务交给他。问：为什么处长总把一些重要的任务交给他？②①③问答系统学科基础：功能语言学我昨天上街，【】看见一个人，【】长得很魁梧，【】穿着军大衣，【】买了两斤肉。（注：【】：缺省）衔接性（cohesion）：话题结构（√）（×）问：谁买了两斤肉呢？答：我答：一个人VS学科基础：功能语言学*篇章分析研究方法言语行为理论互动社会语言学交际文化学语用学会话分析变异分析系统功能语法(more…)自然语言处理

之

语言学基础周国栋

苏州大学自然语言处理实验室

2012年12月21日*研究背景和意义QuotebyFredJelinekEverytimeIfirealinguist,theperformanceofourspeechrecognitionsystemgoesup.Underhissituation,itiscorrect.Generally,itiswrong.QuoteaboutFredJelinekHewasnotapioneerofspeechrecognition,hewasthepioneerofspeechrecognition.-SteveYoung(2010).研究背景和意义语言学之于自然语言处理研究对象：自然语言研究重点：描述、解释=》可计算性=数学之于机器学习数学是机器学习的基础机器学习不是数学的一个分支机器学习不是数学的一个扩展研究背景和意义自然语言：定义自然语言是人类籍以思维和交际的一个音行义相结合的符号系统，是一个变动的音行义相结合的结构系统。自然语言：三个方面语言本体声音、形式和意义相结合的符号系统。变动的结构（整体、成分、关系）。语言功用人类最重要的交际工具和信息载体。人类赖以思维的工具，思维的物质外壳。语言的表现形式口语：语言的最基本形式。书面语：将语言用文字记录下来加以提炼加工（语言的代用品）。体态语（手势语、唇语）研究背景和意义*自然语言处理基础人工智能 形式化理论、机器学习认知科学认知语言学、心理（思维）语言学语言学数学概率、统计、信息理论社会学社会语言学123456学科基础：语言学*~18世纪末：附属于比较语文学研究古代文献18世纪末~20世纪初：语言学成为独立学科历史比较语言学：研究语言之间的亲属关系20世纪初~20世纪60年代：探索人类语言普遍规律结构主义语言学Sassure：“语言是形式而不是实质”，是由单位和关系构成的系统。转换生成语法Chomsky：所有人类语言的语法系统在高度抽象的层次上都大致 相同，由所谓的普通语法经过一定的变化派生出来的。20世纪60年代至今：深入探索语言的本体与功用形式语言学包括结构主义语言学、Chomsky形式语言学、非Chomsky形式语言学Chomsky：侧重语言本体，强调意义通过形式体现。功能语言学Halliday：侧重语言功用，强调意义通过功能体现。学科基础：语言学*~18世纪末：附属于比较语文学研究古代文献18世纪末~20世纪初：语言学成为独立学科历史比较语言学20世纪初~20世纪60年代：探索人类语言普遍规律结构主义