中国现代教育装备
中华人民共和国教育部主管 中国高等教育学会主办
ISSN 1672-1438 CN 11-4994/T
中国期刊全文数据库 中文科技期刊数据库
中国核心期刊(遴选)数据库 国家哲学社会科学学术期刊数据库
首页 杂志简介 杂志目录 期刊封面 推荐阅读 顾问专家 投稿须知 投稿查询 订阅须知 广告业务
您当前的位置:中国现代教育装备 >> 首页 >> 期刊导读
高教 普教
总493期 总491期 总489期
总487期 总485期 总483期
总481期 总479期 总477期
总475期 总473期 总471期
 装备时空 更多>>
北京教育装备行业协会教学实验工作部召开主任工作会议
 编务说明 更多>>
 期刊导读  
基于边缘智能与大模型推理的智慧教室环境与行为感知系统构建
来源:《中国现代教育装备》杂志 时间:2026-11-18 10:18:15
  [导读]针对高校原有课堂模式下课堂环境与学生专注度难以实现实时监测的问题,借助物联网和边缘智能技术,构建一套智慧教室环境与行为感知系统。该系统以ESP32-S3和Jetson Orin Nano为核心,通过传感器对教室的温湿度、光照以及空气质量进行实时采集,利用边缘计算和深度学习模型对教室内视频进行推理,精准识别学生的人脸以及手机使用行为,再结合大模型量化分析学生的课堂专注度,经由Redis与MQTT通道传输数据,最后在OneNET物联网平台上进行可视化呈现。该系统具有实时性强、识别准确、部署灵活的特点,可为教学管理与课堂评价提供坚实的数据支撑与分析依据。

  以人工智能为代表的新技术,推动高等教育加快迈向数据智能驱动发展阶段。然而,在实际教学中,学生手机使用行为较为普遍,造成学习注意力分散,影响课堂表现[1]。由于缺乏对课堂学习状态的系统感知与量化分析手段[2],教师难以及时掌握影响教学效果的关键因素,制约了教学调控与评价的精细化发展。

  物联网与大模型、边缘智能等技术的融合能够有效解决上述问题。大模型在行为识别[3]和姿态估计方面精度非常高,泛化能力也很强,为分析学生认知和学习状态提供了可靠的支持[4-5]。本地部署的边缘计算支持模型既可以实现高效的实时推理,又可以规避视频数据外传带来的隐私风险。这些技术的协同应用,为教学过程监测、课堂管理与学习评价提供了技术支撑[6]。

  本文构建了一个智慧教室环境与行为感知系统,实时采集智慧教室环境数据和学生学习行为数据,借助边缘智能与大模型分析数据,从而形成集“采集—分析—反馈”于一体的智慧教室环境与行为感知分析方案[6]。系统以ESP32-S3为环境数据采集终端,部署温湿度、光照和空气质量等多种传感器,实现对教室环境关键参数的实时监测;同时搭载Jetson Orin Nano智能设备,利用USB摄像头采集学生视频流,结合大模型推理,完成本地化的人脸检测以及手机使用识别,进而构建面向课堂专注度的行为分析通路;最后,借助Redis和MQTT完成高效且低时延的数据传输,并利用OneNET物联网平台实现环境状态与行为分析结果的可视化呈现。该系统不仅能提升课堂学习状态的感知和分析能力,推动智慧教学管理落地,更为后续教学评价与学情分析夯实基础。

  1 智慧教室环境与行为感知系统设计

  2 智慧教室环境与行为感知系统实现

  3 分析与讨论

  4 结语

  围绕高校智慧教室场景下课堂环境监测与学生行为分析的需求,本文设计并实现了一个融合边缘计算与大模型推理的智慧教室环境与行为感知系统。该系统采用分层架构,利用ESP32-S3持续采集教室环境参数,借助Jetson Orin Nano实时识别学生行为,并结合Redis缓存与基于TLS的MQTT通信机制,实现数据的高效、安全传输。依托OneNET平台构建可视化界面,对课堂环境状态、学生专注度变化以及课堂容量等信息进行展示,并将多源课堂数据输入豆包大模型进行分析,获得对课堂整体状态的综合判断与反馈。该系统在实时性和稳定性方面表现较为稳定,能够较好地适应实际教学场景需求,初步验证了“边缘计算与大模型结合”的技术路径在智慧教育中的应用潜力,也为后续课堂分析与教学辅助研究提供了实践参考。

  参考文献

  [1] 江婕,于文婷,王海燕.基于多模态数据的智慧课堂学生学习行为研究[J].中国教育信息化,2024,30(4):107-117.

  [2] Sunday O J, Adesope O O, Maarhuis P L. The effects of smartphone addiction on learning: A meta-analysis[J]. Computers in Human Behavior Reports, 2021, 4: 100114.

  [3] Liu Jingwei, Ren Haotian, Du Yuran, et al. A cascaded residual vision transformer with wavelet transform and application in behavior recognition[J]. Applied Intelligence, 2026, 56(5): 145.

  [4] Li Yating, Qi Xin, Saudagar A K J, et al. Student behavior recognition for interaction detection in the classroom environment[J]. Image and Vision Computing, 2023, 136: 104726.

  [5] Wang Xincheng. A review of deep learning-based student behavior recognition in the classroom[C]//Proceedings of the 5th International Conference on Computer Information and Big Data Applications. New York: Association for Computing Machinery, 2024: 751-756.

  [6] Huang Kebin, Liu Rong, Cheng Yun, et al. IoT-based smart classroom environmental monitoring system design and implementation[C]//Proceeding of 2022 International Conference on Wireless Communications, Networking and Applications(WCNA), 2022.

  [7] Liu Chunming, Qiu Sijie, Yang Chi-Hsin. Detecting learning behaviors using deep-learning-based classroom teaching quality analysis system[J]. Sensors and Materials, 2026, 38(4): 2149-2168.

  [8] 张浩鹏,施铮,刘峰,等. CPViG-Net:基于局部跨阶段视觉图卷积的学生课堂行为识别[J].计算机科学,2026,53(2):57-66.

  [9] 王萌,刘晓燕,罗海驰,等.基于大语言模型的实验报告自动评价研究:以“人工智能应用”课程为例[J].实验技术与管理,2025,42(8):201-209.

  [10] Zhao Jian, Xu Maolin, Wang Xuezhu. A novel dataset based on indoor teacher-student interactive mode using AIoT[J]. Internet of Things, 2024, 25: 101044.

陈佳明 聂家梦 刘辰 杨淇善 北京工业大学


本网版权声明:
①凡本刊本网发布的所有文字作品,版权均属于《中国现代教育装备》杂志(www.zgxdjyzb.com),未经本刊本网授权不得转载、摘编、伪原创或利用其它方式使用。违者本刊本网将追究相关法律责任。
② 凡本刊本网发布的照片、视频,属本刊本网原创或已获作者本人授权。未经授权,擅自使用者,本刊本网及相关权益人将追究其相关法律责任。
关于我们 | 期刊导读 | 顾问专家 | 法律声明 | 广告业务

Copyright(C) 《中国现代教育装备》杂志社有限责任公司 版权所有 
地址:北京市海淀区学院路35号世宁大厦一层108室(100191)
编辑部
高教邮箱:hedu@cmee.net.cn
基教邮箱:bedu@cmee.net.cn
电话:010-82098610
市场部
邮箱:beee@jyzb.net.cn
电话:010-82210085

中国现代教育装备微信公众号二维码