融合主题特征的文本情感分析模型.pdf

://

httwww．skx．com

pjj

:/

DOI１０．１１８９６skx．２３０６００１１１

jj

融合主题特征的文本情感分析模型

杨俊哲１宋莹２陈逸菲２

南京信息工程大学自动化学院南京

１２１００４４

无锡学院自动化学院江苏无锡

２２１４１０５

()

２０２１１２４９５９０＠nuist．edu．cn

,,

摘要随着大型语言模型的快速发展如何在保证模型性能的同时减少模型参数量成为了自然语言处理领的一个重要挑

.,.,,

战然而现有的参数压缩技术往往难以兼顾模型的稳定性和泛化能力为此提出了一种融合主题特征的情感分析新架构

.,

旨在利用主题信息增强模型对文本情感极性的判断能力具体而言采用一种结合和的方法来提取文本的主

LDAKＧmeans

,,.

题特征并将其作为固定维度的向量与词嵌入进行拼接得到新的词向量表示随后使用平均池化技术构建句子级别的表征向

,.,

量并输入到一个全连接层进行情感分类为了验证所提模型的有效性在公开的情感分析数据集上与多个基准算法进行了对

.,,,

比实验实验结果表明所提模型在多个数据集上明显优于ALBERT准确率提高了约３．５％在参数量仅有微小增加的情况

下维持了较高的稳定性和泛化能力.

:;;;;

关键词情感分析ALBERT模型LDA模型主题特征平均池化

中图分类号TP３９１

TextEmotionalAnalsisModelFusinThemeCharacteristics

yg

１２２

,

YANGJunzheSONGYinandCHENYifei

g

,,,

１SchoolofAutomationNaninUniversitofInformationScienceandTechnoloNanin２１００４４China

jgy