(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211170644.6 (22)申请日 2022.09.23 (71)申请人 浙江大华 技术股份有限公司 地址 310053 浙江省杭州市滨江区滨安路 1187号 (72)发明人 白家男　章合群　周祥明　吴金晶　 (74)专利代理 机构 北京同达信恒知识产权代理 有限公司 1 1291 专利代理师 潘平 (51)Int.Cl. G06V 40/10(2022.01) G06V 20/52(2022.01) G06V 10/75(2022.01) (54)发明名称 散发广告的行为检测方法、 装置、 电子设备 和存储介质 (57)摘要 本申请涉及图像处理技术领域， 尤其涉及一 种散发广告的行为检测方法、 装置、 电子设备和 存储介质， 用以提高行为检测效率。 其中， 方法包 括： 对待检测视频中的视频帧进行目标检测， 获 得候选对象的候选位置信息和广告的广告位置 信息； 基于视频帧的候选位置信息和广告位置信 息， 确定视频帧中候选对象与广告的位置关系； 基于确定的位置关系， 筛选出待检测对象， 并将 剩余候选对象作为散发对象； 基于与广告之间的 位置关系为存在重叠的散发对象的数量信息， 确 定待检测对象是否存在散发广告的行为。 由于本 申请通过基于视频帧中基于待检测对象与广告 的位置关系确定是否存在散发广告的行为， 无需 人工识别， 提高行为检测效率。 权利要求书3页 说明书19页 附图7页 CN 115471872 A 2022.12.13 CN 115471872 A 1.一种散发广告的行为检测方法， 其特 征在于， 该 方法包括： 分别对待检测视频中的各视频帧进行目标检测， 获得所述各视频帧中候选对象的候选 位置信息和广告的广告位置信息； 分别基于各视频帧对应的所述候选位置信 息和所述广告位置信 息， 确定相应视频帧中 的候选对象与广告之间的位置关系； 基于确定的各位置关系， 从所述候选对象中筛选出待检测对象， 并将剩余候选对象作 为散发对象； 基于与对应的所述广告之间的位置关系为存在重叠的散发对象的数量信 息， 确定所述 待检测对象是否存在散发所述广告的行为。 2.如权利要求1所述的方法， 其特征在于， 所述基于确定的各位置关系， 从所述候选对 象中筛选出待检测对象， 并将剩余 候选对象作为散发对象， 包括： 针对每个候选对象， 分别执 行以下操作： 对于一个候选对象， 若所述一个候选对象对应的目标视频帧的数量大于预设帧数阈 值， 则将所述一个候选对象作为所述待检测对象， 其中， 所述目标视频帧中候选对象与广告 的位置关系为存在重 叠； 否则， 将所述 一个候选对象划分为所述散发对象。 3.如权利要求1所述的方法， 其特征在于， 所述分别基于各视频帧对应的所述候选位置 信息和所述广告位置信息， 确定相应视频帧中的候选对象与广告之间的位置关系， 包括： 针对每个视频帧中的候选对象分别执 行以下操作： 对于一个视频帧， 对所述视频帧中包含所述候选对象的视频帧区域进行对象关键点检 测， 获得所述视频帧区域中各个目标关键点的位置信息， 所述视频帧区域是根据所述候选 位置信息确定的； 基于各个目标关键点的位置信息， 确定所述 候选对象的目标部位的部位 位置信息； 基于所述部位位置信 息和所述广告位置信 息， 确定所述候选对象与 所述广告之间的位 置关系。 4.如权利要求1～3任一项所述的方法， 其特征在于， 若确定所述待检测对象存在散发 所述广告的行为， 则所述方法还 包括： 基于与所述广告之间的位置关系为存在重叠的散发对象的数量信 息， 确定所述待检测 对象散发所述广告的次数。 5.如权利要求1～3任一项所述的方法， 其特征在于， 若确定所述待检测对象存在散发 所述广告的行为， 则所述方法还 包括： 基于所述确定的各位置关系， 获得所述各视频帧中的待关联广告， 所述待关联广告为 在相应视频帧中与所述 候选对象之间的位置关系为 不存在重 叠的广告； 将所述待关联广告与 所述待检测对象进行关联， 并基于所述待检测对象关联的待关联 广告的数量信息， 确定所述待检测对象对应的广告遗弃等级。 6.如权利要求1～3任一项所述的方法， 其特征在于， 所述分别对待检测视频中的各视 频帧进行目标检测， 获得所述各视频帧中候选对象的候选位置信息和广告的广告位置信 息， 包括： 对每个视频帧分别执 行以下操作：权　利　要　求　书 1/3 页 2 CN 115471872 A 2对于一个视频帧， 对所述一个视频帧进行目标检测， 将检测到的各目标作为第 一目标， 并获得各第一目标的第一 位置信息； 每 个第一目标为相应视频帧中的对象或广告； 基于各第一位置信息， 与当前的目标集合中各第二目标在相应视频帧的第二位置信 息， 对所述各第一 目标和所述各第二 目标进行匹配， 所述当前的目标集合包括在所述一个 视频帧之前的视频帧中检测到的目标； 若匹配成功， 且所述第一目标为对象， 则将所述第 一目标作为候选对象， 并将所述第一 位置信息作为所述 候选对象的候选位置信息； 若匹配成功， 且所述第一目标为广告， 则将所述第 一目标作为广告， 并将所述第 一位置 信息作为所述广告的广告位置信息 。 7.如权利要求6所述的方法， 其特 征在于， 所述方法还 包括： 将匹配成功的第一目标的第 一位置信 息， 作为对应的第 二目标在所述一个视频帧中的 第二位置信息； 和/或， 将匹配失败的第一目标， 作为 新的第二目标 添加到所述对象集 合中。 8.如权利要求6所述的方法， 其特 征在于， 所述方法还 包括： 对于一个第二目标， 若在预设帧数内不存在与所述一个第二目标匹配成功的第一目 标， 则将所述 一个第二目标从所述对象集 合中去除。 9.如权利要求1～3任一项所述的方法， 其特征在于， 在所述分别基于各视频帧对应的 所述候选位置信息和所述广告位置信息， 确定相应视频帧中的候选对象与广告之 间的位置 关系之前， 还 包括： 分别对所述各视频帧进行目标检测， 获得所述各视频帧中的候选对象的第一置信度， 并将第一置信度低于第一置信度阈值的候选对象去除； 和/或， 分别对所述各视频帧进行目标检测， 获得所述各视频帧中的广告的第二置信度， 并将 第二置信度低于第二置信度阈值的广告 去除。 10.一种散发广告的行为检测装置， 其特 征在于， 包括： 检测单元， 用于分别对待检测视频中的各视频帧进行目标检测， 获得所述各视频帧中 候选对象的候选位置信息和广告的广告位置信息； 第一确定单元， 用于分别基于各视频帧对应的所述候选位置信息和所述广告位置信 息， 确定相应视频帧中的候选对象与广告之间的位置关系； 筛选单元， 用于基于确定的各位置关系， 从所述候选对象中筛选出待检测对象， 并将剩 余候选对象作为散发对象； 第二确定单元， 用于基于与对应的所述广告之间的位置关系为存在重叠的散发对象的 数量信息， 确定所述待检测对象是否存在散发所述广告的行为。 11.一种电子设备， 其特征在于， 其包括处理器和存储器， 其中， 所述存储器存储有计算 机程序， 当所述计算机程序被所述处理器执行时， 使得所述处理器执行权利要求1～9中任 一所述方法的步骤。 12.一种计算机可读存储介质， 其特征在于， 其包括计算机程序， 当所述计算机程序在 电子设备上运行时， 所述计算机程序用于使 所述电子 设备执行权利要求 1～9中任一所述方 法的步骤。 13.一种计算机程序产品， 其特征在于， 包括计算机程序， 所述计算机程序存储在计算权　利　要　求　书 2/3 页 3 CN 115471872 A 3