结合语义和结构的短文本相似度计算.PDFVIP

第28卷 第8期 计 算机 技 术 与发 展 Vol.28 No.8 2018年8月 COMPUTERTECHNOLOGY AND DEVELOPMENT Aug. 2018 结合语义和结构的短文本相似度计算 倪高伟,李 涛,刘 峥 (南京邮电大学计算机学院,江苏 南京 210046) 摘 要:短文本相似度不仅包括语义相似度,还包括语法相似度。 目前在短文本相似度度量算法中,大多只分析短文本语 义层次的相似性,往往忽略了短文本的语法结构对短文本相似度的重要影响,导致无法捕获大量的文本语义信息,同时在 短文本分类任务中召回率不够理想。 通过分析短文本的特征,将EMD(earth mover’s distance)求解线性规划中运输问题 的最优解应用于度量两个短文本的相似度,用Word2Vec度量两个单词的语义相似性,提出了词序位置相似度的