基于记忆库和后处理方法解决长尾实例分割问题

作者:范馨月; 刘腾; 鲍泓; 潘卫国*; 梁天骄; 李晗
来源:计算机应用研究, 2023, 40(06): 1876-1881.
DOI:10.19734/j.issn.1001-3695.2022.09.0486

摘要

数据的长尾特性一直是解决计算机视觉问题的一大挑战,为了应对这一挑战在实例分割任务中带来的困难,通常引入图像重采样作为一种简单有效的方法。然而一幅图像中可能存在多个类,仅通过图像重采样不足以在类别的数据量层面上获得足够均衡的分布,因此提出一种以目标为中心的记忆库后处理方法。首先引入记忆库模型,设立以目标为单位的存储策略,解决各类别数量不均衡问题;其次使用一种后处理校准方法,通过调整每个类的置信度得分提升稀有类和普通类的预测值。在公开数据集LVIS上的实验验证了所提方法的有效性,并且相比EQL方法,准确率能够提升2.2%。