基于预训练模型的双通道情感分类方法

作者：石杰

来源：电脑知识与技术, 2023, 19(20): 31-35.

DOI：10.14004/j.cnki.ckt.2023.0999

• 预训练模型
• 双通道模型
• TCN网络
• BiGRU网络
• 情感分类

针对传统神经网络对中文文本数据进行情感分类时，存在情感信息特征表示不充分，特征提取不足的问题，提出了一种基于预训练模型的双通道情感分类方法。该方法通过ERNIE模型进行预训练来增强文本的特征表示能力，再分别使用TCN网络和Att-BiGRU网络双通道模型对情感特征进行提取，将最终得到的特征信息融合拼接后分类输出，并且在训练过程中使用Adabelief算法进行优化，来加速模型收敛。通过实验证明，该方法在情感分类任务中表现出了优异的效果。

• 单位
  中国人民银行