基于肤色分割和卷积神经网络的手语识别系统

作者：刘涛; 马静; 徐军; 郑煜伟; 唐兆军; 付琳; 周莹莹

来源：电脑知识与技术, 2021, 17(35): 14-17.

DOI：10.14004/j.cnki.ckt.2021.3486

• 肤色分割
• YCrCb
• 卷积神经网络
• 手语识别

针对听障人士手语交流的问题，设计了一种基于肤色分割和卷积神经网络的手语识别系统。首先，利用视觉传感器采集不同的手势图像，然后基于YCrCb空间对手势图像进行肤色分割，构建手势图像数据集，采用卷积神经网络对手势图像数据进行特征提取与分类，将训练与测试得到的最优模型导入树莓派，使用讯飞语音包将识别结果转化为语音，实现语音播报手语识别结果。

• 单位
  哈尔滨理工大学