摘要

研究了人工智能在多模态学习状态中的应用,通过在课堂教学环境下拍摄的教学视频或图片进行分析,来了解学生的学习状态和情绪,并根据学生的学习状态来调整教学策略。具体方法上,采用了基于决策层融合的方式对面部情绪和语音情绪进行融合,利用PAD情绪量表建立情绪与学习状态之间的对应关系,并在此基础上提出了不同的教学策略。