(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210712221.6 (22)申请日 2022.06.22 (71)申请人 秦皇岛希睿智能科技有限公司 地址 066000 河北省秦皇岛市河北 大街西 段438号 (72)发明人 华长春　丁浩然　魏饶　杨世宇　 骆曦　张海楠　 (74)专利代理 机构 西安铭泽知识产权代理事务 所(普通合伙) 61223 专利代理师 张举 (51)Int.Cl. H04N 13/296(2018.01) H04N 13/239(2018.01) H04N 13/332(2018.01) H04N 5/232(2006.01)G09B 5/06(2006.01) (54)发明名称 一种应用于 远程教学的立体 视觉随动系统 (57)摘要 本发明涉及一种应用于远程教学的立体视 觉随动系统， 涉及教学辅助领域， 包括视频采集 端,采集各角度的课堂音视频； 课堂采集控制端， 调整视频采集端的姿态； 多媒体、 控制数据高速 网络接口， 接收视频采集端采集到的音视频信息 进行编码并发送； VR处理终端， 接收编码后的音 视频信息并进行解码处理； 设备终端， 接收VR处 理终端处理后的音视频信息， 并采集姿态信息 反 馈控制指令给多媒体、 控制数据高速网络接口， 多媒体、 控制数据高速网络接口转发控制指令给 课堂采集控制端； 操作简单， 实用性强， 网络传输 稳定延迟低， 有较好的实时性， 极强的自然交互 性。 权利要求书2页 说明书5页 附图2页 CN 115190287 A 2022.10.14 CN 115190287 A 1.一种应用于远程教学的立体视 觉随动系统， 其特 征在于， 包括: 视频采集端(2),用于采集各角度的课 堂音视频； 课堂采集控制端(1)， 用于调整所述视频采集端(2)的姿态； 多媒体、 控制数据高速网络接口(3)， 用于接收所述视频采集端(2)采集到的音视频信 息并对其进行编码、 发送； VR处理终端(5)， 用于 接收编码后的音视频信息并进行解码处 理； 设备终端(4)， 用于接收所述VR处理终端(5)处理后的音视频信息， 并采集姿态信息反 馈控制指令给所述多媒体、 控制数据高速网络接口(3)， 所述多媒体、 控制数据高速网络接 口(3)转发控制指令给 所述课堂采集控制端(1)。 2.根据权利要求1所述的一种应用于远程教学的立体视觉随动系统， 其特征在于： 所述 课堂采集控制端(1)包括主控制器以及与主控制器连接的云台、 电源模块， 所述视频采集端 (2)设于所述云台上。 3.根据权利要求1所述的一种应用于远程教学的立体视觉随动系统， 其特征在于： 所述 视频采集端(2)包括 随动系统协处理器， 以及与所述随动系统协处理器协处理器所连接的 双目摄像头。 4.根据权利要求1所述的一种应用于远程教学的立体视觉随动系统， 其特征在于： 所述 设备终端(4)包括 微处理器以及与其相连的头 部姿态感知模块； 所述头部姿态感知模块采集佩戴者的头部姿态信 息并通过多媒体、 控制高速网络接口 (3)传送给视频采集端(2)。 5.根据权利要求1所述的一种应用于远程教学的立体视觉随动系统， 其特征在于： 所述 VR处理终端(5)包括无线传输模块和视 觉渲染模块。 6.一种根据权利要求1 ‑5任意一项所述的应用于远程教学的立体视觉随动系统 的工作 方法， 包括以下步骤： 通过视频采集端(2)采集各角度的课 堂音视频； 通过多媒体、 控制高速网络 接口(3)接收课 堂的音视频信息并进行编码处 理后发出； 通过VR处 理终端接收编码后的音视频信息并进行解码处 理并发出； 设备终端接收解码处理后的音视频信息， 采集姿态信息并反馈控制指令给多媒体、 控 制高速网络接口(3)， 多媒体、 控制高速网络接口(3)转发控制指令给所述课堂采集控制 端 (1)。 7.根据权利要求6所述的一种应用于远程教学的立体视觉随动系统的工作方法， 其特 征在于： 还 包括： 通过所述视频采集端接收到转发的控制指令后， 课堂采集控制端(1)通过自身角度与 收到的角度信息进 行整合， 通过数字模糊PID算法控制与摄像机相连的双自由度云台， 使得 摄像头按照操作人员头 部运动实时跟随运动。 8.根据权利要求6所述的一种应用于远程教学的立体视觉随动系统的工作方法， 其特 征在于： 还 包括： 通过所述VR处理终端(5)对编码的音视频信息进行解压还原操作， 还原为高清晰度的 现场视频与音频； 通过VR处理终端， 采用深度学习算法对图像进行重建， 模拟光学变焦效果， 扩大课堂可权　利　要　求　书 1/2 页 2 CN 115190287 A 2视范围， 实现高质量数码变焦。权　利　要　求　书 2/2 页 3 CN 115190287 A 3