- 4
- 0
- 约1.8万字
- 约 14页
- 2023-09-02 发布于四川
- 举报
本发明涉及知识图谱知识推理技术领域,具体涉及一种基于融合多模态信息的实体和关系表示的链接预测方法,包括:收集与所要构建知识图谱主题相关的图像数据、文本数据和三元组数据;将预处理后的三元组数据进行知识抽取和实体对齐;对图像数据进行特征提取,生成视觉表示;对文本数据和三元组数据进行特征提取,生成文本表示;将生成的视觉表示、文本表示和三元组数据共同作为输入,对融合模块进行训练,学习包含多模态信息的实体和关系向量表示;通过解码部分对融合模块学习到的特征表示进行解码并进行链接预测,输出预测为正三元组的概率
(19)国家知识产权局
(12)发明专利申请
(10)申请公布号 CN 116680343 A
(43)申请公布日 2023.09.01
(21)申请号 202310641906.0 G06F 18/214 (2023.01)
原创力文档

文档评论(0)