基于量子理论的词句相似度研究.pdfVIP

摘 要 近年来，随着人工智能的发展，自然语言处理变得尤为重要。量子理论由于 具备叠加、纠缠、不相容和干涉等方面的性质，使得其成为潜在的优秀建模框架, 本论文旨在研究量子力学在自然语言理解方面的应用潜力。在自然语言中，基于 一词多义以及句子匹配的任务，利用量子理论来构建一种形式化框架，考察其捕 捉句子、词语的能力以及语义建模的能力。 在本文中，首先介绍了近年来该方面的研究现状，阐述了量子理论的特征以 及一些相关的基本概念。其次介绍了基于量子理论的一词多义的判别方式，在句 中出现多义词时，可以依据保真度的概念将其与它的各个解释配对，找出在此位 置处它的最佳的解释。最后利用量子理论构建了进行语句相似度比较的判别方法。 我们采用量子态来构建句子的语义 Hilbert 空间，并计算句子信息变换过程中信 息的保真度。与此同时，将量子理论与 Word Embedding 技术巧妙结合，在高维 低秩向量空间中表示单词或概念，求取句子的相似性。并且，我们在一个真实业 务场景中构造的问句匹配数据集上进行了模拟，模拟的计算数据表明本文提出的 方法比经典传统方法得到了更好的结果。本文提出的方法，为今后进行多个句子 的相似度研究提供了一样全新的思路，也是对计算机科学与量子理论学科交叉研 究的一个突破，具有潜在的应用意义。 关键词：量子理论；自然语言；保真度；一词多义；句子相似度 i Abstract In recent years, with the development of artificial intelligence, natural language processing has become particularly important. Quantum theory has the characteristics of superposition, entanglement, incompatibility and interference, which make it an excellent modeling framework. On the task of polysemy and sentence matching, we explore the ability of quantum theory as a framework for capturing sentence meaning and modeling semantic processes. In this paper, the recent research status, the characteristics of quantum theory and some basic concepts are introduced.Secondly, the discriminate of polysemy based on quantum theory is introduced. When a polysemy appears in a sentence, it can be paired with its explanations according to the concept of fidelity, and the best explanation can be found.Finally, the method of sentence similarity is introduced. We use quantum states to construct the semantic Hilbert space and calculate the fidelity of information during sentence information transformation. And the similarity of the sentence is obtained by combining word embedding technology to represent words or concepts in semantic vector spaces. On the sentence matchi