【自然语言处理实践09】基于交互(Interaction)的文本匹配.pptxVIP

1基于交互(Interaction)的文本匹配

2基于表示的文本匹配的缺陷1.表示型文本匹配对文本的抽取仅仅是最后的特征表示向量，信息损失难以衡量；2.表示型文本匹配缺乏对文本pair间词法句法信息的比较；3.基于表示的文本匹配中，两个文本之间没有任何的交互，对于问答类的任务来说并不友好，因为在问答任务中，答案可能仅仅关注问题中的某些关键词语，而两个文本互不交互的表示，容易使得编码器学不到什么词语重要，什么词语不重要，也就是说，最好的方法是“揣着问题找答案”---------------为了改进上述问题，基于交互的匹配被提出；在文本对表示的过程中，通过尽早在文本pair间进行信息交互，然后再匹配（或者表示、匹配），这样能充分交换文本对的信息，从而使文本表示更加具有可解释性。

3基于表示与交互的文本匹配——比较基于表示的文本匹配（左）与基于交互的文本匹配（右）

4基于表示与交互的文本匹配——比较匹配方式：交互式文本匹配：基于文本序列之间的交互进行匹配、使用注意力机制等计算交互注意力、适用于复杂语义关系任务表征式文本匹配：将文本序列转换为固定长度的向量或矩阵表示、计算表示之间的相似度进行匹配、适用于简单文本匹配任务应用场景：交互式文本匹配：问答系统、机器翻译、句子相似度计算等表征式文本匹配：关键词匹配、信息检索、分类等联系：特征提取方式不同：交互式通过交互过程提取特征，