融合双模态特征的目标检测方法、系统、设备及存储介质

作者：解宇敏; 张浪文; 谢巍; 余孝源

来源：2021-09-17, 中国, ZL202111093663.9.

本发明公开了一种融合双模态特征的目标检测方法、系统、计算机设备及存储介质,所述方法包括：获取训练数据集；训练数据集包括双模态图像和注释文件,双模态图像包括可见光图像和红外图像；将可见光图像输入目标检测模型中的光照感知权重生成网络,输出两种模态特征的融合权重；将双模态图像和两种模态特征的融合权重输入目标检测模型中的具有特征循环融合机制的主路网络,输出预测结果；利用两种模态特征的融合权重和预测结果以及注释文件训练目标检测模型,将待测双模态图像输入训练好的目标检测模型,得到待测双模态图像中目标的位置和类别的预测结果。本发明通过构建目标检测模型,改善了模型对环境光照变化的适应能力,提高了检测精度。

• 单位
  华南理工大学