(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211183937.8 (22)申请日 2022.09.27 (71)申请人 深圳市铁越电气有限公司 地址 518000 广东省深圳市龙岗区龙城街 道黄阁路44 1号龙岗天安数码创业园1 号厂房B座8层B804 (72)发明人 刘润瑞　张金圣　刘晨飞　 (74)专利代理 机构 深圳市徽正知识产权代理有 限公司 4 4405 专利代理师 张浩 (51)Int.Cl. G06V 10/764(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) G06V 10/82(2022.01)G06V 40/16(2022.01) G06V 40/20(2022.01) G08B 21/24(2006.01) H04N 7/18(2006.01) (54)发明名称 一种施工场所的智能巡 检方法及系统 (57)摘要 本发明公开了一种施工场所的智能巡检方 法及系统， 系统包括： 图像采集装置和服务器， 服 务器包括违规行为检测模块、 检测结果优化模块 和控制模块； 图像采集装置， 用于对施工场所的 实时视频和图像进行采集， 并将实时视频上传至 控制模块， 将图像上传至违规行为检测模块； 违 规行为检测模块， 用于对图像采集装置返回的 图 像进行违规行为检测， 生成初始检测结果； 检测 结果优化模块， 用于获取初始检测结果， 对检测 结果进行优化， 生成目标检测结果； 控制模块， 用 于目标检测结果中的违规行为进行统计及告警， 对违规行为 以及图像采集装置采集的实时视频 进行展示。 本发明能够实时对人员违规行为以及 危险情况进行巡检， 保障施工人员的人身安全和 项目进度。 权利要求书3页 说明书8页 附图2页 CN 115457331 A 2022.12.09 CN 115457331 A 1.一种施工场所的智能巡检系统， 其特征在于， 系统包括图像采集装置和服务器， 服务 器包括违规行为检测模块、 检测结果优化模块和控制模块； 所述图像采集装置， 用于对施工场所的实时视频和图像进行采集， 并将采集的实时视 频上传至控制模块， 将采集的图像上传至违规行为检测模块； 所述违规行为检测模块， 用于对图像采集装置返回的图像进行违规行为检测， 生成初 始检测结果； 所述检测结果优化模块， 用于获取初始检测结果， 对检测结果进行优化， 生成目标检测 结果； 所述控制模块， 用于目标检测结果中的违规行为进行统计及告警， 对违规行为以及所 述图像采集装置采集的实时视频进行展示。 2.根据权利要求1所述的施工场所的智能巡检系统， 其特征在于， 所述图像采集装置包 括： 视频采集模块， 用于对施工场所的实时视频进行采集； 图像抓拍模块， 用于每隔一预定时间， 对施工场所的图像进行抓拍； 网络传输模块， 用于通过ht tps协议与违规行为检测模块进行通信； 第一数据传输模块， 用于将采集的实时视频图像上传至控制模块； 第二数据传输模块， 用于将抓拍的图像实时上传至违规行为检测模块。 3.根据权利要求2所述的施工场所的智能巡检系统， 其特征在于， 所述违规行为检测模 块具体用于： 预先获取违规行为样本， 基于违规行为样本对预先构建的YOLOV5网络进行训练， 生成 目标检测模型； 将图像采集装置返回的图像输入目标检测模型， 获取目标检测模型的输出， 记为初始 检测结果。 4.根据权利要求3所述的施工场所的智能巡检系统， 其特征在于， 所述违规行为检测模 块， 包括： 人员检测模块， 用于检测施工场所的人员出勤情况； 安全帽检测模块， 用于检测施工场所的人员安全帽佩戴情况； 反光背心检测模块， 用于检测施工场所的员反光背心穿戴情况； 吸烟检测模块， 用于检测施工场所的人员的吸烟； 人员倒地检测模块， 用于检测施工场所的人员倒地情况。 5.根据权利要求4所述的施工场所的智能巡检系统， 其特征在于， 所述检测结果优化模 块包括： 置信度优化模块， 用于过设定合理的阈值将置信度去除低于该阈值的检测框； 目标框尺寸优化模块， 用于根据不同的算法目标设定合理的尺寸大小， 去 除低于阈值 尺寸大小的目标框； 背景优化模块， 用于同时检测目标与目标相关联的物体， 判定目标与目标关联的物体 检测框是否存在一定的联系， 若存在则保留检测结果， 不存在则去除； 时间优化模块， 用于在预定的时间间隔内， 将同一区域中的施工人员的违规行为只进 行一次告警；权　利　要　求　书 1/3 页 2 CN 115457331 A 2多重算法优化模块， 用于基于至少两种算法对同一违规行为的初始检测结果进行优 化。 6.根据权利要求5所述施工场所的智能巡检系统， 其特征在于， 所述多重算法优化模块 包括用于检测吸烟行为的双重算法优化模块和用于检测 安全帽佩戴情况的二级分类算法 模块， 所述双重算法优化模块， 用于在 吸烟检测模块中， 将人体关键点检测结果与抽烟检测 框进行嘴部关键点与香烟检测框的判定， 若香烟检测框与嘴部 关键的距离小于人头检测框 宽度的1/ 5则判定为抽烟违规行为。 所述二级分类算法模块， 用于首先对安全帽进行检测， 通过安全帽检测框裁剪具体图 像， 利用分类模型对所裁剪的图像进行二次判断， 若目标检测模型与分类模型均属于同一 种类别， 并且分类模型置信度大于0.9则判定为佩戴安全帽， 否则为未佩戴安全帽的违规行 为。 7.根据权利要求6所述的施工场所的智能巡检系统， 其特 征在于， 所述控制模块包括： 实时视频展示模块， 用于实时接收图像采集装置传回的视频进行播 放； 违规图像展示模块， 用于检测结果优化模块输出的目标检测结果， 若目标检测结果为 违规行为， 对违规行为对应的图像进行展示； 三维地图展示模块， 用于在施工场所对应的三维地图上， 展示对应图像采集装置点位 的实时视频和/或违规图像； 数据统计模块， 用于根据历史违规行为进行分析统计， 得出总违规数量、 变化曲线， 违 规位置， 以及各种违规行为出现的几率。 8.根据权利要求7所述的施工场所的智能巡检系统， 其特征在于， 图像采集装置为摄像 机， 所述控制模块还用于： 根据不同场景， 启停相应的违规行为检测模块以及对摄像机进行操作， 实现摄像机的 焦距和角度的调整。 9.一种基于权利要求1 ‑8任一项所述的施工场所的智能巡检系统的智能巡检方法， 其 特征在于， 包括： 图像采集装置对施工场所的指定区域的实时视频和图像进行采集， 将监控视频实时传 输至控制模块， 将图像上传至违规行为检测模块进行违规行为的检测； 违规行为检测模块接收图像采集装置上传的实时图像， 进行违规行为的检测， 生成初 始检测结果； 检测结果优化模块接收初始检测结果， 根据不同的检测类型进行相应的优化策略， 生 成目标检测结果； 控制模块接收检测结果优化模块优化后的目标检测结果， 对目标检测结果中的违规行 为进行记录、 统计、 告警及展示。 10.根据权利要求9所述的方法， 其特征在于， 所述施工场所包括门禁区域和工作区域， 所述违规行为检测结果包括人员检测模块、 安全帽检测模块、 反光背心检测模块、 吸烟检测 模块和人员倒地检测模块， 所述违规行为检测模块接 收图像采集装置上传的实时图像， 进 行违规行为的检测， 生成初始检测结果， 包括： 判断图像采集装置所在施工场所的位置；权　利　要　求　书 2/3 页 3 CN 115457331 A 3