- 1、本文档共222页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
谢谢 (k1?1 + k2?2, ?) = k1(?1, ?) + k2(?2, ?) = 0 因此,k1?1 + k2?2?UT,即 UT 是 Vn(F) 的一个子空间。 (2) 设 {?1, ?2, …, ?r} 是 U 的标准正交基,把它扩充成 Vn(F) 的标准正交基 {?1, ?2, …, ?r, ?r+1, …, ?n},则 Vn = L{?1, ?2, …, ?r, ?r+1, …, ?n} U = L{?1, ?2, …, ?r} UT = L{?r+1, …, ?n} 所以 Vn = U + UT。 又 ???U?UT,有 ??U,并且 ??UT,从而 (?, ?) = 0,即 ? = 0。于是 Vn(F) = U?UT。 一般地,我们称由 (1.21) 式所定义的子空间 UT 为 U 的正交补子空间。 线性空间的应用举例 文本信息检索的向量空间模型 文本信息检索,包括信息的存储、组织、表现、查询、存取等各个方面,其核心为文本信息的索引和检索。传统的文本信息检索是围绕相关度这个概念展开的,通常分为基于文字的检索、基于结构的检索和基于用户信息的检索三类。 基于文字的检索主要根据文档的文字内容来计算查询和文档之间的相关性测度,使得与用户查询需求最相关的结果排在最前面,同时允许尽可能多的、与用户查询有一定关系的结果被包括进来。上世纪 70 年代到 80 年代,许多基于文字的信息检索理论与模型被提出,其中最为著名的是 Gerard Salton 提出的向量空间模型,至今该模型仍然是文本信息检索领域最为常用的模型之一。 向量空间模型是一个用于信息检索的代数模型,实施的主要步骤为: 1? 对待检索的 m 个文本文档(Document)编号,构成文档集合 {D1, D2, …, Dm}; 2? 对文本进行预处理,抽取代表其内容特征的基本语言单位,如某些词或者短语,构成特征项(Term)集合 {T1, T2, …, Tn}; 3? 将每个文档描述成由一系列特征项组成的向量,向量的分量为各个特征项 Ti 在 Dj 中的 TF?IDF 权值 wi(Dj),即 Dj = (w1(Dj), w2(Dj), …, wn(Dj))T; 4? 依据布尔模型对查询(Query,记为Q)条件向量化:当 Ti 在查询条件 Q 中时,将对应的第 i 坐标置为 1,否则置为 0,即 Q = (q1, q2, …, qn)T, (14) 5? 计算文档 Dj 与查询 Q 的相关度: (15) 6? 根据 Sim(Dj, Q),j = 1, 2, …, m,对待检索的文档进行排序。 至于模型实施的第三步中特征项 Ti 在 Dj 中的权值 wi(Dj),通常采用 TF?IDF 加权技术获得,用来评估一个特征项相对于文档集合中一个文档的重要程度。 (1) TF 为特征项频率(Term Frequency)的缩写,特征项 Ti 在 Dj中的 TF 权为 tfi(Dj),通过下式计算 (16) (1) TF 为特征项频率(Term Frequency)的缩写,特征项 Ti 在 Dj中的 TF 权为 tfi(Dj),通过下式计算 (16) 其中分子 nij 是特征项 Ti 在文档 Dj 中出现的频数,而分母则是所有特征项在文档 Dj 中出现的频数总和,其含义为:如果一个特征项在某个文档中出现的频率越高,说明它描述文档内容属性的能力越强,那么这个特征项就越重要; (2) IDF 为逆向文档频率(Inverse Document Frequency)的缩写,特征项 Ti 在 Dj 中的 IDF 权为 idfi,通过下式计算 (17) 其中分子 m 是文档集合的基数,而分母则是包含特征项 Ti 的文档数目,其含义为:如果文档集中包含某个特征项的文档越多,说明它描述文档内容属性的能力越低,那么这个特征项就越不重要; (3) 特征项 Ti 在 Dj 中的 TF?IDF 权值 wi(Dj) 为 wi(Dj) = tfi(Dj) ? idfi,其含义为:特征项的重要性与它在文档中出现的频率成正比,同时与它在文档集合中出现的频率成反比。 注记 18 在度量特征项的重要程度时,之所以用“特征项频
您可能关注的文档
- (2011漳州质检)福建省漳州市2011届高三普通高中毕业班质量检查试卷语文.doc
- (洪晓珊)线面平行教学设计方案.doc
- (名师解析)山东省德州市2015届高三3月模拟考试文综历史试卷.doc
- (英语毕业论文)从英剧《唐顿庄园》看世纪初英国妇女社会地位变化.doc
- [考前三个月]2015届高考政治名师考点点拨讲义-专题15-文化强国和道德建设.doc
- 从占有到共存%3a《占有》生态女性主义解读-毕业论文.doc
- “第二课堂”和大学生创新能力培养的研究.doc
- 国际投资仲裁仲裁员回避制度析论-毕业论文.doc
- “学导式”数学课堂教学思考.doc
- 国内红枣干燥技术的研究现状及发展趋势_王海新-毕业论文.doc
- 3.2 学习成就梦想 课件(共27张PPT) 统编版道德与法治七年级上册(内嵌音频+视频).pptx
- 2.1.2植物细胞工程的应用课件(共32张PPT) 人教版选择性必修3(内嵌音频+视频).pptx
- 纲要上第3课 秦统一多民族封建国家的建立 课件(共19张PPT)(内嵌音频+视频).pptx
- 高中历史必修三课件第6课文艺复兴和宗教改革1(共44张PPT).ppt
- 课时5二次函数y=ax2bxc的图像与性质课件北师大版九年级数学下册.pptx
- 《宗教大学生信仰调查报告》.doc
- 信息必刷卷03(广州专用)(原卷版).docx
- 343实际问题与一元一次方程(三)球赛积分问题(分层作业).docx
- Unit2Animals核心单词课件高中英语上外版(2020)1_1.pptx
- 2.1.2植物细胞课件(共20张PPT)人教版生物七年级上册(内嵌音频+视频).pptx
最近下载
- 铁路机车运用管理系统规则(铁总运〔2025〕314号) .pdf VIP
- 河南交投集团招聘笔试真题.pdf
- 二年级数学下册期末无纸化测评PPT.pptx VIP
- 通化(2011)1403-I回流线架空地线安装图.pdf
- 2025年普法学法知识竞赛题库及参考答案【基础题】.docx VIP
- 2025年《植物生产技术》形考作业参考答案.pdf VIP
- DB51_T 3222-2024 电动汽车充电设施消防安全规范.pdf VIP
- 人教版(2024)新教材七年级音乐下册印在心中的歌《中国人民解放军军歌》精品教案.doc VIP
- 冠心病诊断与治疗指南.ppt VIP
- 医药公司温湿度监测系统更换专项内审(包括计划、检查记录、内审报告).pdf VIP
文档评论(0)