基于MR实验的“多模态+人机协同”教学及应用探索

作者:陆吉健; 周美美; 张霞; 何晚晴; 张明敏
来源:远程教育杂志, 2021, 39(06): 58-66.
DOI:10.15881/j.cnki.cn33-1304/g4.2021.06.007

摘要

技术的革新带动了多维空间的融合和多模态数据的生成,MR技术启动了课堂数学新一轮的交互式革命。人工智能的快速发展与教育应用,也带来了教学中的人机协同。在人机协同以及具身认知等相关理论的支撑下,结合中学数理实验教学案例,建构了基于MR实验的"多模态+人机协同"教学方式,它是一种融合视觉、听觉、触觉等多模态数据,实现师生与智能设备互联,围绕固定教学目标而协同共进的教学。这一教学方式不仅具有数据多模态、人机协同共进等特点,而且应用于MR实验教学中,相对于传统实验和VR实验教学而言,能够更好地激发并培养学生的创新性思维与动手能力。随着"AI+教与学"应用的不断发展,未来"多模态+人机协同"教学的价值与趋势主要在于:依托多情境自由转换,助力学习者创新能力的提升;融合"视-听-触"多感官通道,提升交互过程的具身认知;建立多模态数据采集、分析和反馈机制,推动反思性观察;建立多阶段数据建模跟踪,实现拓展性迁移等。