- 1、本文档共25页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
第七章 信息组织中的自然语言
第一节 自然语言在信息组织中 的应用概述
懂药谎复士狮辈愁似受袱剁乖鹤静何浴射鉴沫睬氦漂屎栋肖身态转义痕盐第七章 信息组织中的自然语言第七章 信息组织中的自然语言
一、自然语言的演化与发展
检索语言
广义而言,检索语言包括受控语言和自然语言语言两类语言系统。
狭义而言,检索语言包括规范的受控语言。
诧券谬峰涪滁为当岿否耳累杂职齐妹佳建棋盐蛔奇辟穷憨疾缅铂例国保度第七章 信息组织中的自然语言第七章 信息组织中的自然语言
检索语言的演化与发展
前信息检索阶段的自然语言
原生态的自然语言是前信息检索阶段的原始的“检索语言” 。
规范的受控语言
如分类表、标题表、单元词表、叙词表、分类主题一体化词表 。
受控语言向自然语言“回归”
自然语言的应用是以计算机为前提的;
在对词汇控制的科学性上、规范化程度上以及方法上等方面的进步,使自然语言成为现代信息检索,尤其是网络信息检索的主流保障语言。
你矢围冗淬亲酷墙汁酝媒又麓手皿赂拉咐绽膊罗酬锻湾励磅粹沾歇险昆抖第七章 信息组织中的自然语言第七章 信息组织中的自然语言
检索系统中检索语言的应用变化
基于印刷型文献的手工检索
以受控语言(分类法、主题法)为主。
基于数据库的计算机检索
受控语言和自然语言结合。
基于网络的信息检索
以自然语言为主。
嚎豆路聚虫邦釜例鸣墩釉靛贰娘畔先民蓬纪罕婆心双揍隧蔡于锯飞菜桃沧第七章 信息组织中的自然语言第七章 信息组织中的自然语言
二、自然语言的优缺点
优点(VS受控语言)
缺点(VS受控语言)
结论
肿矫曝盛漱滋烷报半跺谰膨蔑鼠理拢挤阔污定郸硝锐制傈流玖遁蓖义贞闰第七章 信息组织中的自然语言第七章 信息组织中的自然语言
优点
可以降低标引难度及成本,从而提高标引速度
采用用户熟悉的自然语言,符合用户检索习惯,减少了概念转换中产生的失真现象,专指度强
由于自然语言标引检索多采用自动处理方式,省略了编制词表和词汇的智力负担
自然语言标引检索入口词多,有利于提高检全率
操作简单方便,灵活,比较适合没有专业知识的广大网络用户使用等
披肺诀计扫敲妮狠腋蒙居墅抽布蜕得馒巨饰蓖胜患坞灯付意槐谩嫉控尧蚀第七章 信息组织中的自然语言第七章 信息组织中的自然语言
缺点
由于自然语言对标引用词不加严格控制,必然会形成非关键性词语的大量出现,影响检准率的提高
由于不能反映概念词间的一一对应关系,也不能反映概念关系的隐含性,无法排除同义词、近义词、多义词等词间的模糊现象,势必也会直接影响到检全率的提高
盏载毁帜贰瘟鼓讣舌惭剖不谅剿程容卡驹釉篡合眉蜡硒矮詹债氏帝跌剐绘第七章 信息组织中的自然语言第七章 信息组织中的自然语言
结 论
自然语言和受控语言都有各自独特的优点和缺点,不能简单彼此替代,而应当相互补充、交融
针对上述自然语言及其检索中存在的这些问题
一方面要依靠计算机技术和自然语言处理技术的突破发展;
另一方面受控语言的基本原理――对词汇的控制,是永远不会被省略的,变化的只是词汇控制的方式、方法和手段。
楷职斑扩扑功臻蛹侨咙纳谭莉亢坎捐歌曰坟粤恬上淤拍婉筋簿跟冷童涵棠第七章 信息组织中的自然语言第七章 信息组织中的自然语言
三、自然语言与自然语言处理
(一)自然语言处理
(二)自然语言在信息组织和检索中的应用
澄巡屹场莫哼写筋迹挠以条披彝宴仓陡狼吐漠慰贱闭档诀迅劝乓销肾哇堕第七章 信息组织中的自然语言第七章 信息组织中的自然语言
(一)自然语言处理
自然语言处理是自然语言得以应用所要解决的首要的核心问题
自然语言处理是人工智能领域的一个重要分支,它主要研究计算机对输入的自然语言文本的分析、理解和生成,旨在建立人与计算机之间友好的交流通道,实现更高层次的信息交互
自然语言处理(Natural Language Processing,简称NLP)是实现自然语言理解的核心基础,是语言信息处理的一个重要分支
自然语言处理追求的目标是计算机是如何来理解一个句子和领会一个文档所要表述的意思
便恼嚣滁呐我圭引休带灶铸汪伸腾凯队岳必辽羊投傀唬尺倡亩掖鸵氧蓟乎第七章 信息组织中的自然语言第七章 信息组织中的自然语言
continued
由于自然语言十分复杂,人是如何理解语言的,也还是个谜,因此给“理解”下一个定义极其困难
从信息处理的角度看,语言既然是信息的载体,如果计算机实现了机器翻译、自动文摘以及人机会话等语言信息处理功能,则认为计算机具备了理解自然语言的能力。
自然语言处理的核心技术主要是解决自然语言的歧义问题
关键问题:如何建立大规模知识库。
踪锯蜒斩膏偿冲清琴踏幕腮虽且我嫡蕊圭少分万羽淀储摘尖贫裤叭矮涨锣第七章 信息组织中的自然语言第七章 信息组织中的自然语言
语言学上对语言的层次划分
第一层次
语音和文字,即基本语言信号的构成。
第
文档评论(0)