(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210346202.6 (22)申请日 2022.03.31 (71)申请人 西安翔迅科技有限责任公司 地址 710077 陕西省西安市锦业 二路15号 中航工业西安计算技术研究所1号厂 房112室 (72)发明人 程彦龙　李远宏　李刚　陈高科　 刘磊　王亮　张超　 (74)专利代理 机构 西安智邦专利商标代理有限 公司 6121 1 专利代理师 王少文 (51)Int.Cl. G06V 20/52(2022.01) G06V 40/10(2022.01) G06V 10/82(2022.01)G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 一种用于弹射座椅维修场景的智能监管系 统及监管方法 (57)摘要 本发明涉及智能监管系统， 具体涉及一种用 于弹射座椅维修场景的智能监管系统及监管方 法。 解决了现有智能监管系统对遮挡严重且干扰 强的弹射座椅维修环境不能有效监控、 无法实现 精准细分区域的监控以及在算法层面缺少去重 功能的技术问题。 本发明监管系统包括系统平 台、 应用服务单元、 智能设备和算法服务单元； 系 统平台将事件算法配置信息和算法参数信息通 过应用服务单元传送给人体穿戴属性识别接口 模块； 人体穿戴属性识别接口模块对接收 的图像 进行算法分析处理， 得到检测结果并返回给应用 服务单元； 应用服务单元通过算法逻辑判定检测 结果是否违规， 并最终通过违规图像相似度去重 接口模块判定 违规图像是否 重复。 权利要求书4页 说明书9页 附图2页 CN 114821464 A 2022.07.29 CN 114821464 A 1.一种用于弹射座椅维修场景的智能监管系统， 其特征在于： 包括系统平台、 应用服务 单元、 智能设备和算法服 务单元； 所述智能设备包括多个摄像机， 摄像机将 获取的各维修场景的视频流传送给应用服务 单元； 所述系统平台包括终端信息管理模块、 事件算法配置模块、 算法模型管理模块和实时 画面监测模块； 所述终端信息管理模块用于智能设备维护； 所述事件算法配置模块用于设置事件算法配置信 息； 所述事件算法配置信 息包括事件 的编号及名称、 事件关联算法的编号及名称、 检测区域的设定、 算法逻辑以及告警时间设 定； 其中， 检测区域 为所述视频流抽帧成的整幅图像或图像中的指定区域； 所述算法模型 管理模块用于设置算法参数信息； 所述算法服务单元包括人体穿戴属性识别接口模块和违规图像相似度去重 接口模块； 所述系统平台将事件算法配置信息和算法参数信息通过应用服务单元下发给人体穿 戴属性识别接口模块； 所述应用服务单元将接收到的视频流传送给实时画面监测模块， 同时将视频流抽帧成 图像发送给 人体穿戴属性识别接口模块； 所述人体穿戴属性识别接口模块用于接收图像并对图像中检测区域的人和人体属性 进行检测、 接 收并保存事件算法配置信息和算法参数信息， 以及进行人体穿戴属 性识别的 算法分析处 理得到检测结果， 并将检测结果返回给至应用服 务单元； 应用服务单元根据算法逻辑判定所述检测结果是否违规， 若违规， 则应用服务单元将 对应的当前帧违规图像发送给违规图像相似度去重接口模块， 若不违规， 则继续处理下一 帧图像； 所述违规图像相似度去重接口模块接收应用服务单元发送的违规图像， 作 出违规图像 与前一帧违规图像是否 重复的判定结果， 并将判定结果返回给应用服 务单元； 若判定结果为重复， 则所述应用服务单元进一步判断当前违规图像是否在 设定的告警 时间内， 若是， 则将当前违规图像上报给系统平台； 若否， 则无需上报； 所示系统平台对上报的违规数据进行记录保存并周期性进行统计分析处 理； 所述实时画面 监测模块用于对所述视频流进行显示。 2.根据权利要求1所述的一种用于弹射座椅维修场景的智能监管系统， 其特征在于： 所 述智能设备还 包括音箱及报警灯； 所述智能设备维护用于多个摄像机的安装绑定、 多个摄像机的IP及端口设置， 以及音 箱、 报警灯的安装绑定； 所述系统平台根据接收到的上报违规图像， 通过音箱及报警灯进行 预警提醒。 3.根据权利要求2所述的一种用于弹射 座椅维修场景的智能监管系统， 其特 征在于： 所述事件为维修作业中要求识别的是否释放静电、 关键岗位人员是否在场、 是否穿工 服、 是否拿唱卡、 是否使用手机、 是否抽烟中的其中一种或多种； 所述是否释放静电具体判定为， 作业人员进入工作区域前进行摸静电球的动作； 所述关键岗位人员在场具体判定为， 在作业 区域内是否检测到关键岗位人员佩戴特殊 袖章；权　利　要　求　书 1/4 页 2 CN 114821464 A 2所述算法参数信息包括置信度和交并比。 4.一种用于弹射座椅维修场景的监管方法， 基于权利要求1 ‑3任一所述的智能监管系 统， 其特征在于， 包括以下步骤： S1)人体穿戴属性识别接口模块的搭建、 训练； S2)违规图像相似度去重 接口模块的搭建、 训练及测试； S3)通过系统平台上的事件算法配置模块和算法模型管理模块进行事件算法配置和算 法参数设置， 然后下发给算法服务单元， 并保存； 人体穿戴属性识别接口模块进 行在线检测 预热； S4)应用服务单元拉取各个场景摄像机的视频流， 将其推送至系统平台的实时画面监 测模块， 同时将视频流抽帧为图像发送给算法服 务单元的人体穿戴属性识别接口模块； S5)人体穿戴属性识别接口模块对图像进行进行在线检测得到检测结果， 并将得到的 检测结果返回给应用服 务单元； S6)应用服务单元根据系统平台中算法逻辑的配置信息判定当前帧图像是否违规， 若 违规， 则将该帧违规图像连同对应的摄像机IP发送给违规图像相似度去重接口模块， 进行 步骤S6.1)； 若不违规， 则返回步骤S4)； S6.1)违规图像相似度去重 接口模块对违规图像进行分析处 理； S6.1.1)违规图像相似度去重接口模块接收摄像机IP和违规图像后， 对同一IP下接收 的前后两帧违规图像进行处 理得到判定结果， 并将判定结果返回给应用服 务单元； S6.1.2)将前一帧违规图像删除， 将后一帧违规图像更新为前一帧违规图像， 等待 处理 新的违规图像； S6.2)应用服务单元接收返回判定结果后， 如果判定结果为重复， 则进一步判断当前违 规图像是否在设定的告警时间内， 若 是， 则将当前违规图像上报给系统平台， 系统平台对违 规图像进行展示； 若否， 则无需上报， 继续处 理视频流的下一帧； S7)系统平台记录保存上报的数据， 并周期性对上报的违规数据进行统计分析处 理。 5.根据权利要求4所述的一种用于弹射座椅维修场景的监管方法， 其特征在于， 步骤 S1)具体为： S1.1)样本图像获取以及标注样本图像中的所有识别目标； 所述识别目标包括人体和人体属性； 所述人体属性具体为手、 袖章、 工服、 唱卡、 手机和香烟； S1.2)目标检测模型的搭建以及训练； S1.2.1)搭建端到端的目标检测模型； S1.2.2)将标注好的所有样本图像按比例划分为训练集 图像和测试集 图像， 并使用训 练集图像训练目标检测模型； S1.2.3)利用测试集图像测试目标检测模型对所述识别目标的检测效果； S1.2.4)根据测试效果调整目标检测模型的超参数， 重新训练目标检测模型； S1.2.5)利用TensorRT加速部署训练好的目标检测模型的权重， 提升目标检测模型的 推理速度； 步骤S3)中， 所述人体穿戴属性识别接口模块进行在线检测预 热具体为： S3.1)人体穿戴属性识别接口模块内部加载保存的事件算法配置信息和算法参数信权　利　要　求　书 2/4 页 3 CN 114821464 A 3