原创力文档- 1
- 0
- 约1.11万字
- 约 10页
- 2023-08-09 发布于四川
- 举报
一种基于多任务训练的图像描述和问答方法，涉及计算机视觉和计算机语言。使用BLIP预训练模型，载入大规模图文数据集预训练；预处理图像描述数据和图像问答数据，使用标识符区分输入数据，图像描述、图像问答两个任务在同一框架下实现；构建多任务模型，使用多模态图像文本特征提取，图像经过视觉特征提取模块成为视觉向量，作为注意力输入到文本特征提取模块之中；文本使用LM损失函数，使模型学习文本的输出内容；根据模型训练的任务计算对应的损失函数及权重：动态学习分配多个任务的损失权重，调整最优学习方式。在同一个模型下实
(19)国家知识产权局
(12)发明专利申请
(10)申请公布号 CN 116561368 A
(43)申请公布日 2023.08.08
(21)申请号 202310662783.9
(22)申请日 2023.06.06
(71)申请人 厦门大学
您可能关注的文档
- 临床医学用防感染隔离体征状态监测设备及监测系统.pdf
- 一种碲化镉多晶料的制备装置.pdf
- 一种基于单据的信用考核方法、系统、存储介质及设备.pdf
- 一种卡片切割装置.pdf
- 一种叠加式差动加压阀组.pdf
- 一种用于空中无人作战平台的专用枪械.pdf
- 平板布高效染色装置及平板布高效染色方法.pdf
- 一种废锂离子电池正极原位修复的方法.pdf
- 用于塔机的转向式底架、塔机和该转向式底架的转向方法.pdf
- 一种铁水保温的方法.pdf
- 伟明环保-市场前景及投资研究报告-境内业务稳健运行，印尼市场贡献边际增量.pdf
- 桂东县法院系统招聘考试真题2025.pdf
- 贵州省黔南布依族2026年中考三模物理试题及答案.pdf
- 贵州省黔南州2026年中考语文二模试卷附答案.pdf
- 贵州省铜仁市2026年中考语文二模试卷附答案.pdf
- 2026上半年安徽事业单位联考合肥市庐江县招聘36人备考题库及一套完整答案详解.docx
- 贵州省毕节市2026年中考语文一模试卷附答案.pdf
- 贵州省贵阳市南明区2026年中考语文一模试卷附答案.pdf
- 2026上半年安徽事业单位联考合肥市庐江县招聘36人备考题库及一套参考答案详解.docx
- 贵州省贵阳市白云区2026年中考二模物理试题附答案.pdf
文档评论（0）