MindEdu是基于mindspore的教育系统,旨在通过人工智能技术,收集学生的课堂状态,利用人工智能技术对学生的课堂进行分析,生成学生的综合素质评价报告。
一、利用YOLO、CLIP、OpenCV等模型和技术对学生课堂进行表情识别,记录学生的课堂状态。
二、使用LORA技术,利用综合素质评价、核心素养等教育相关数据对Chatglm大模型进行微调;
三、利用RAG检索增强生成技术,对微调后的大模型进行进一步数据增强;
四、将学生课堂表现、成绩文件等数据发送给多模态大模型GLM-4-9B,大模型自动生成综合素质评价报告
五、借助华为数字人技术,生成报告的视频,帮助学校、教师、家长等群体全面的了解学生。