(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202210643256.9 (22)申请日 2022.06.09 (65)同一申请的已公布的文献号 申请公布号 CN 114743274 A (43)申请公布日 2022.07.12 (73)专利权人 深圳市纬亚森科技有限公司 地址 518000 广东省深圳市龙华区民治街 道上芬社区第五工业区一区8 8号101 (72)发明人 邝志芳　 (74)专利代理 机构 深圳市弘为力创知识产权代 理事务所(普通 合伙) 44751 专利代理师 康晓春 (51)Int.Cl. G06V 40/20(2022.01) G06V 40/18(2022.01) G06V 40/16(2022.01) G06V 20/52(2022.01) G06T 7/90(2017.01) G06Q 50/20(2012.01)G08B 21/24(2006.01) (56)对比文件 CN 105931186 A,2016.09.07 US 2020178 876 A1,2020.0 6.11 CN 114422820 A,202 2.04.29 CN 111277844 A,2020.0 6.12 CN 112884666 A,2021.0 6.01 CN 111476121 A,2020.07.31 张玉兵等.视 觉特征的分块加权图像 检索方 法. 《计算机科 学与探索》 .2017,(第0 3期),133- 142. 乔树清等.如何构建多媒体网络教学系统. 《齐齐哈尔医学院学报》 .20 05,第22卷(第8期), 潘萍等.泛雅网络教学平台下高职院校中药 药剂学的混合教学模式探讨. 《卫 生职业教育》 .2017,(第20期),52- 54. 刘率.基于rtmp的远程教学直 播系统的设计 与实现. 《中国优秀硕士学位 论文全文数据库 (信息科技 辑)》 .2019,(第1期), 审查员 罗秀英 (54)发明名称 基于物联网的多媒体远程教学管理系统及 方法 (57)摘要 本发明公开了基于物联网的多媒体远程教 学管理系统及方法， 课堂状态辅助监控模块， 所 述课堂状态辅助监控模块对图像处理分析模块 中的图像处理结果进行分析， 实时判断学生的上 课状态， 并将学生上课状态的判断结果实时传递 给课堂状态人工监控模块； 课堂状态人工监控模 块， 所述课堂状态人工监控模块获取课堂状态辅 助监控模块的判断结果， 并通过人工方式对判断 结果进行校验。 本发明结合各个学生自身的历史 数据进行分析考虑， 对课程表现差的学生进行警 告提示， 同时根据学生课程表现差异， 对课堂交 互过程中不同表现的学生被选中的概率进行调整能够在一定程度上提高学生的学习积极性。 权利要求书5页 说明书13页 附图2页 CN 114743274 B 2022.09.09 CN 114743274 B 1.基于物联网的多媒体 远程教学 管理系统， 其特 征在于， 包括： 学生信息获取模块， 所述学生信息获取模块对上课学生进行编号， 并获取学生在教学 过程中文字互动版块输入的文字信息， 并通过学生使用的多媒体设备上的摄像头获取学生 上课时的图像信息； 文字信息处理模块， 所述文字信息处理模块根据课程教学过程中老师的互动项目， 对 学生的文字信息进行处理， 得到学生文字信息处理值， 将编号为i的学生第j次输入的文字 信息的处 理值记为Bij； 图像处理分析模块， 所述图像处理分析模块获取学生上课时的图像信息， 并对学生上 课时的图像信息进行处 理； 课堂状态辅助监控模块， 所述课堂状态辅助监控模块对图像处理分析模块中的图像处 理结果进行分析， 实时判断学生的上课状态， 并将学生上课状态的判断结果实时传递给课 堂状态人工监控 模块； 课堂状态人工监控模块， 所述课堂状态人工监控模块获取课堂状态辅助监控模块的判 断结果， 并通过 人工方式对判断结果进行 校验； 远程告警模块， 所述远程告警模块对课堂状态人工监控模块得到的校验结果中上课状 态异常的学生进行警告提示， 并比较警告后第一预设时间内学生上课状态的变化情况， 所 述第一预设时间是 人为设置的； 课堂交互管理模块， 所述课堂交互管理模块根据 学生文字信 息处理值及学生上课状态 判断结果， 对课 堂交互过程中的学生进行 管理； 所述学生信 息获取模块获取的文字信 息为从课程开始至当前时间内， 学生每次输入的 文字内容及输入的时间， 所述学生信息获取模块每隔第二预设时间采集一次学生使用的多媒体设备上的摄像 头前的画面信息， 记为学生上课时的图像信息， 并将获取 的学生上课时的图像信息及相应 的学生编号 直接传递给图像处 理分析模块， 所述第二预设时间是 人为设置的； 所述文字信 息处理模块对学生的文字信 息进行处理时， 获取课程教学过程中老师的每 次互动项目对应的时间段， 将课程教学过程中从课程开始老师第n次互动项目对应的时间 段记为[T1n， T2n]， 其中， T1n表示第n次互动项目的起始时间， T2n表示第n次互动项目的终 止时间； 所述文字信息处理模块获取学生每次输入的文字内容对应的输入时间， 将编号为i的 学生第j次输入的文字内容记为A ij， 将编号为i的学生第 j次输入的文字内容对应的输入时 间记为Tij； 所述文字信息处理模块获取数据库中互动项目容忍偏差率β， 获取与Tij相邻且起始时 间小于等于Tij的互动项目， 记为课程教学 过程中从课程 开始老师第n1次互动项目， 所述文字信息处 理模块得到编号 为i的学生第j次输入的文字信息的处 理值Bij， 当T1 （n1） ≤Tij≤T2 （n1） 时， 则 当T2 （n1） ＜ Tij≤β *[T2 （n1） ‑T1 （n1） ]+T2 （n1） 时， 则权　利　要　求　书 1/5 页 2 CN 114743274 B 2当Tij＞β*[T2（n1） ‑T1 （n1） ]+T2 （n1） 时， 则 其中， F （Aij） 表示文字信息处 理模块对文字内容Aij的识别处 理结果， 当文字内容Aij中的关键词与数据库中预制的从课程开始老师第n1次互动项目对应的 关键词相关时， 则F （Aij） =1， 当文字内容Aij中的关键词与数据库中预制的从课程开始老师第n1次互动项目对应的 关键词不相关时， 则F （Aij） = 0， 所述容忍偏差率β表示历史数据库中老师每次互动项目中， 将与互动项目对应关键词 相关的文字信息个数记为xg， 获取xg中前百分之c的文字信息对应的各个输入时间中的最 大值Tz， 计算Tz与相应互动项目的终止时间之 间的差值除以相应互动项目中终止时间与起 始时间差值的商， 得到历史数据库中一次互动项目对应的偏差值， 计算历史数据库中每次 互动项目对应偏差值的平均值， 得到容忍 偏差值β， 同一课程中不同互动项目对应的容忍偏差值是存在差异 的， 每结束一个互动项目后， 数据库均会对容忍偏差值β 进行 更新。 2.根据权利要求1所述的基于物联网的多媒体远程教学管理系统， 其特征在于： 所述文 字信息处理模块判断文字内容A ij中的关键词 与数据库中预制的从课程开始老师第n 1次互 动项目对应的关键词是否相关时， 获取数据库中预制的从课程开始老师第n1次互动项目对应的各个关键词构成的集合， 得到第n1次互动项目对应的标准 集合， 获取文字内容Aij中的各个关键词构成的集合， 得到编号为i的学生第j次输入的文字 信息对应的关键词集 合， 判断第n1次互动项目对应的标准集合与编号为i的学生第j次输入的文字信息对应的 关键词集 合的交集是否为空集， 当所得交集结果为空集时， 则判定文字信息处理模块判断文字内容Aij中的关键词与 数据库中预制的从课程 开始老师第n1次互动项目对应的关键词不相关， 当所得结果不为空集时， 则判定文字信息处理模块判断文字内容Aij中的关键词与数 据库中预制的从课程 开始老师第n1次互动项目对应的关键词相关。 3.根据权利要求1所述的基于物联网的多媒体远程教学管理系统， 其特征在于： 所述图 像处理分析模块获取到学生上课时的图像信息后， 直接对获取的图像信息进行处 理， 所述图像处理分析模块在对学生上课时的图像信息的处理方式为对图像信息中的背 景进行模糊处 理， 所述图像处 理分析模块在对图像信息中的背景进行模糊处 理的过程中， 所述图像处理分析模块识别图像中各个像素点对应的RGB值， 分别将图像中各个像素 点对应的RGB值与肤色RGB阈值库进 行比较， 对对应RGB值属于肤色RGB阈值库的像素点进行 第一标记， 所述肤色RGB阈值库是数据库中预制的， 且肤色RGB阈值库为人体肤色对应RGB值 的集合，权　利　要　求　书 2/5 页 3 CN 114743274 B 3