一种基于文本层级结构的图像描述生成方法.pdfVIP

  • 2
  • 0
  • 约2.35万字
  • 约 20页
  • 2023-07-20 发布于四川
  • 举报

一种基于文本层级结构的图像描述生成方法.pdf

本发明公开了一种基于文本层级结构的图像描述生成方法。本发明构建双层LSTM解码器,引入视觉和语言信息选择机制,利用图像全局特征和词嵌入,引导注意力机制在图像特征和语言信息之间进行有效选择,解码生成语义信息更准确的描述句子。针对传统语言模型在语义特征提取能力不足的缺陷,本发明在解码阶段引入FARIMA滤波器改进的有序长短时记忆网络,通过编码句子的层级结构来保留不同文本层级的语义信息,利用图像空间信息与内容语义对齐,提高了解码器在图像特征和语义特征对齐的跨模态表征能力,并增加了网络的长时依赖。根据本

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 113569932 A (43)申请公布日 2021.10.29 (21)申请号 202110810083.0 (22)申请日 2021.07.18 (71)申请人 湖北

文档评论(0)

1亿VIP精品文档

相关文档