科研之友
微信
新浪微博
Facebook
分享链接
摘要
图像情感识别是通过分析视觉刺激来预测人类情感的抽象过程。现有方法大多缺乏对对象间关系以及对象与场景间相互作用的关注，并且对象间复杂多样的关系难以得到充分利用，进而导致难以正确对图像情感进行预测。为了解决上述问题，提出一种基于抽象关系场景图的图像情感识别方法。首先，构建对象和属性检测器来提取图像中对象及其属性的特征。其次，使用对象特征推理对象间的亲密度和抽象关系特征，进而构建抽象关系场景图。再次，提出抽象关系图卷积网络来推理抽象关系场景图。最后，设计渐进式注意力机制对多个对象特征进行融合，以得到图像的整体对象特征。在FI、EmotionRoI和Twitter I三个公开数据集上的实验结果表明，该方法的分类准确率优于现有方法。
- 单位
