摘要

本项目以智能家居语音交互为主题,带领学生制作能“听”会“说”、能“听”会“做”的智能语音机器人。项目共分四个阶段:音频数据采集及处理、模型训练、模型转换、模型部署。学生先利用pyaudio库采集音频指令数据集,再利用matplotlib、librosa库将音频文件批量转换为音频谱图,接着搭建CNN卷积神经网络进行模型训练,将训练好的权重文件转换成onnx模型,最后结合Arduino板、LED小灯、风扇、温度传感器、图灵机器人平台等完成对语音识别模型的本地部署。