(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210334588.9 (22)申请日 2022.03.30 (71)申请人 中科融信科技有限公司 地址 100043 北京市石景山区石景山路54 号院1号楼4层404 (72)发明人 张现　尹鹤　曾玲　 (74)专利代理 机构 北京维正专利代理有限公司 11508 专利代理师 谢明晖 (51)Int.Cl. G06V 20/52(2022.01) G06V 40/16(2022.01) G06V 40/20(2022.01) (54)发明名称 一种基于视频的行人监控方法、 装置、 设备 及介质 (57)摘要 本申请涉及一种基于视频的行人监控 方法、 装置、 设备及介质， 应用于公共安防领域， 该方法 包括： 实时获取监控设定区域的视频监控数据； 根据实时获取的视频监控数据中的各监控画面， 确定监控设定区域的行人数量、 行人运动速度、 每一行人的位置、 行人区域图像； 根据行人数量、 行人运动速度、 每一行人的位置， 确定监控设定 区域的人员聚集情况； 对行人区域图像进行特征 提取， 得到行人区域图像对应的行人特征， 行人 特征包括： 行为特征 以及人脸特征； 根据行为特 征以及人脸特征确定行人区域图像对应的行人 属性； 根据人员聚集情况以及行人属性确定监控 设定区域是否存在危险情况， 若是， 则触发报警 事件， 以将报警事件对应的报警信息输出至各监 控客户端。 权利要求书2页 说明书13页 附图2页 CN 114743157 A 2022.07.12 CN 114743157 A 1.一种基于 视频的行 人监控方法， 其特 征在于， 包括： 实时获取监控设定区域的视频监控数据； 根据实时获取的所述视频监控数据中的各监控画面， 确定所述监控设定区域的行人数 量、 行人运动速度、 每一行 人的位置、 行 人区域图像； 根据所述行人数量、 行人运动速度、 每一行人的位置， 确定所述监控设定区域的人员聚 集情况； 对所述行人区域图像进行特征提取， 得到所述行人区域图像对应的行人特征， 所述行 人特征包括： 行为特 征以及人脸特 征； 根据所述行为特 征以及所述人脸特 征确定所述行 人区域图像对应的行 人属性； 根据所述人员聚集情况以及所述行人属性确定所述监控设定区域是否存在危险情况， 若是， 则触发报警事 件， 以将所述报警事 件对应的报警信息 输出至各监控客户端。 2.根据权利要求1所述的基于视频的行人监控方法， 其特征在于， 所述根据实时获取的 所述视频监控数据中的各监控画 面， 确定所述监控设定区域的行人数量、 行人运动速度、 每 一行人的位置、 行 人区域图像， 包括： 对实时获取的所述视频监控数据中的各监控画面进行背景提取， 以得到各监控画面中 的多个初始运动目标图像； 对多个初始运动目标图像 中筛选， 以得到每一行人对应的行人区域图像； 其中， 所述行 人区域图像的数量作为所述 监控设定区域的行 人数量； 对每一监控画面进行网格划分， 确定每一监控画面中的行人区域图像所在的目标位 置， 其中， 所述目标位置作为行 人区域图像对应的行 人的位置； 根据多个时刻下的行 人的目标位置的变化确定相应的行 人运动速度。 3.根据权利要求1所述的基于视频的行人监控方法， 其特征在于， 所述根据实时获取的 所述视频监控数据中的各监控画 面， 确定所述监控设定区域的行人数量、 行人运动速度、 每 一行人的位置、 行 人区域图像， 包括： 将多个监控画面输入行人信息确定模型中， 以得到所述行人数量、 每一行人的位置、 行 人区域图像， 所述行 人信息确定模型 是根据训练样本集以及 初始模型 得到的； 在多个时刻下， 基于每一个行 人的位置的变化信息， 确定每一个行 人的行人运动速度。 4.根据权利要求1所述的基于视频的行人监控方法， 其特征在于， 所述根据所述行人数 量、 行人运动速度、 每一行 人的位置， 确定所述 监控设定区域的人员聚集情况， 包括： 根据所述行 人数量、 行人运动速度、 每一行 人的位置， 得到人群密度； 根据预设的对应关系确定所述监控设定区域对应的参考人群密度， 其中， 所述对应关 系为监控设定区域与参 考人群密度的对应关系； 判断所述人群密度是否大于所述 监控设定区域对应的参 考人群密度； 若是， 则确定人员聚集情况为人员聚集； 若否， 则确定人员聚集情况为非人员聚集。 5.根据权利要求1所述的基于视频的行人监控方法， 其特征在于， 所述根据所述行为特 征以及所述人脸特 征确定所述行 人区域图像对应的行 人属性， 包括： 利用边界行为特 征识别网络对所述行为特 征进行识别， 得到第一识别结果； 利用特殊人员识别网络对所述人脸特 征进行识别， 得到第二识别结果； 将所述第一识别结果以及所述第二识别结果作为所述行 人属性，权　利　要　求　书 1/2 页 2 CN 114743157 A 2其中， 所述边界行为特征识别网络用于识别边界行为， 所述特殊人员识别网络用于识 别特殊人员。 6.根据权利要求5所述的基于 视频的行 人监控方法， 其特 征在于， 还 包括： 当所述第 一识别结果是边界行为， 和/或所述第 二识别结果为特殊人员， 则基于多个监 控设定区域的视频监控数据的各监控画面， 对所述行 人进行行人重识别； 识别到所述行 人后， 对所述行 人进行追踪， 以形成移动轨 迹； 将所述移动轨 迹输出至各监控客户端。 7.根据权利要求1至6任一项所述的基于视频的行人监控方法， 其特征在于， 所述触发 报警事件之后， 还 包括： 当监控设定区域内存在显示屏时， 判断行 人区域图像是否存在特定画面； 若是， 对所述特定画面进行加密， 并发送加密后的特定画面至显示屏， 其中， 所述显示 屏在接收并显示加密后的特定画面。 8.一种基于 视频的行 人监控装置， 其特 征在于， 包括： 视频监控数据获取模块， 用于实时获取监控设定区域的视频监控数据； 信息确定模块， 用于根据实时获取的所述视频监控数据中的各监控画面， 确定所述监 控设定区域的行 人数量、 行人运动速度、 每一行 人的位置、 行 人区域图像； 人员聚集情况确定模块， 用于根据所述行人数量、 行人运动速度、 每一行人的位置， 确 定所述监控设定区域的人员聚集情况； 特征提取模块， 用于对所述行人区域图像进行特征提取， 得到所述行人区域图像对应 的行人特征， 所述行 人特征包括： 行为特 征以及人脸特 征； 行人属性确定模块， 用于根据 所述行为特征以及所述人脸特征确定所述行人区域图像 对应的行 人属性； 警示模块， 用于根据 所述人员聚集情况以及所述行人属性确定所述监控设定区域是否 存在危险情况， 若 是， 则触发报警事件， 并将所述报警事件对应的报警信息输出至各监控客 户端。 9.一种电子设备， 其特 征在于， 其包括： 一个或多个处 理器； 存储器； 一个或多个应用程序， 其中所述一个或多个应用程序被存储在所述存储器中并被配置 为由所述一个或多个处理器执行， 所述一个或多个程序配置用于： 执行根据权利要求1至7 任一项所述的方法。 10.一种计算机可读存储介质， 其特征在于， 所述存储介质存储有至少一条指令、 至少 一段程序、 代码集或指令集， 所述至少一条指令、 所述至少一段程序、 所述代码集或指令集 由所述处 理器加载并执 行以实现如权利要求1至7任一项所述的方法。权　利　要　求　书 2/2 页 3 CN 114743157 A 3