科研之友
微信
新浪微博
Facebook
分享链接
摘要
基于计算机视觉技术对民用飞机飞行员操纵行为进行识别和监控，对于确保民用航空运行安全具有重要的现实意义。提出一种复杂光照环境下的飞行员关键点检测方法。鉴于民用飞机驾驶舱复杂光照环境，提出图像亮度调节模块，该模块分级判断图像亮度均值，实现不同亮度图像特征融合，提升运行速度，并最大化保留图像细节特征；鉴于较多的关键点定位是精确行为识别的基础，提出轻量化的飞行员肢体关键点和手部关键点检测网络，该网络在高分辨率分支运用次序交换注意模块，以缓解原始视觉注意力计算成本随输入分辨率增加呈二次增长的问题，联合部署飞行员肢体和手部关键点检测网络，选择典型的飞行动作进行实验验证；进行大量消融实验，定量和定性地探讨不同组件（图像亮度调整模块、次序交换注意模块）对模型性能的影响，建立所提方法与预测结果之间的可解释关系。
- 单位
