基于多模态数据融合的学习投入状态监测方法
- 专利权人:
- 发明人:
- 赵莉,刘婷婷,刘海,时俊雅,陈红,李佳雯
- 申请号:
- CN202211402111.6
- 公开号:
- CN115688051A
- 申请日:
- 2022.11.10
- 申请国别(地区):
- CN
- 年份:
- 2023
- 代理人:
- 摘要:
- 本申请公开了一种基于多模态数据融合的学习投入状态监测方法及计算机设备,该方法包括:获取被监测主体的音频信息及皮电、肌电生理数据;将所述音频信息输入训练好的语音情绪识别模型中,获得第一情感标识;将所述皮电、肌电生理数据输入训练好的生理情绪识别模型中,获得第一情感标识;根据所述第一情感标识、第二情感标识以及预设的阈值条件,对被监测主体的学习投入状态进行分类,获得分类结果。本发明使用肌电、皮电生理信息,结合音频信息进行情绪状态分类,使得最后的情感状态分析更加真实准确;分析结果可作为衡量课堂中学生对教学内容的反馈以及积极性的重要依据。
- 来源网站:
- 中国工程科技知识中心