基于协同注意力的图文多任务美学分析研究.pdfVIP

与

信息技术信息化数据科学与技术

基于协同注意力的图文多任务美学分析研究

11

苗好田梁嘉欣

摘要随着网络技术的进步和移动智能终端的普及，社交图像已成为重要的信息载体，人们对于图像内容趣味

度等美学属性也有了进一步的追求。在此背景下，社交图像的美学评价研究备受瞩目。过往相关研究大

多仅将图像自身的视觉信息映射到人工标注，而未充分挖掘利用其他维度的相关内容。因此，利用模态

数据或相关属性等来帮助突破图像美学研究的“瓶颈”极具意义。文章提出了一个基于多模态协同注意

力及评分和风格多任务学习的图文美学分析模型。首先，提取图像和文本的局部特征组成向量矩阵，作

为模型的输入。然后，基于Tran