【自然语言处理实践08】基于表示(Representation)的文本匹配.pptxVIP

1基于表示(Representation)的文本匹配

2什么是文本匹配？文本匹配技术是自然语言处理中另一个非常重要的任务。文本匹配主要进行文本对之间的相似度或者相关度计算。所谓相似度，指文两个文本是否描述相同的语义，而相关度则指两个文本之间是否存在特定的关系，例如是否可以从文本A推理出文本B（蕴含关系）。文本匹配任务的形式主要是对文本对进行关系判断，任务的最终形式包含两种，一种是相似/相关度计算，即计算两个文本的相似/相关度打分，另一种是相似/相关分类，1表示相似/相关，0表示不相似/相关（偶尔有些任务可能包含中立的情况，此时任务为三分类）。

3文本匹配的常见应用范围1.搜索引擎当我们在搜索引擎输入一个问题，搜索引擎会为我们计算最相关的答案返回展示给我们2.问答系统常见的有功能型机器人，根据你的提问返回最佳的解决问题方案3.推荐系统推荐技术中，根据你个人的特征画像，为你推荐最和你匹配的信息（阅读内容、新闻、视频信息流等）4.计算广告你推荐与你个人特征画像的商品的广告，以增加广告的转化量等

4基于表示的文本匹配整体流程：1.先使用编码器将两个文本进行编码，即将文本对先分别表示为两个向量；2.在匹配层计算两个向量的相似/相关度打分，得到两个文本的相似/相关度；这种方法中，对文本对的编码可以使用同一个编码器，也可以使用不同的编码器，使用同一个编码器的结构，我们称之为