- 0
- 0
- 约1.39万字
- 约 12页
- 2023-06-06 发布于四川
- 举报
本发明公开了一种融合知识图谱的检索式知识前缀引导视觉问答方法,包括:构建的背景知识库包含有标注的知识数据,该知识数据利用视觉问答过程中的知识召回。在此基础上,通过基于词干匹配的检索器检索构建知识文本序列对图像编码器和阅读器进行初训练,以在阅读器中引入知识,然后通过孪生检索器对图像编码器和阅读器进行再训练,以增强阅读器对知识的感知,这种基于背景知识库配合检索器和阅读器的协同工作,提升考虑外部知识的视觉问答的准确性。
(19)国家知识产权局
(12)发明专利申请
(10)申请公布号 CN 115761753 A
(43)申请公布日 2023.03.07
(21)申请号 202211200419.2
(22)申请日 2022.09.29
(71)申请人 浙江大学
地址 310058 浙江
原创力文档

文档评论(0)