(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210321094.7 (22)申请日 2022.03.29 (71)申请人 北京易华录信息技 术股份有限公司 地址 100043 北京市石景山区阜石路16 5号 院1号楼10 01室 (72)发明人 刘昌毅　王亚茹　穆翀　马洪民　 王琳琛　孙韵佳　吕晓鹏　张星　 史晓蒙　 (74)专利代理 机构 北京三聚阳光知识产权代理 有限公司 1 1250 专利代理师 王娜 (51)Int.Cl. G06K 9/62(2022.01) G06T 7/73(2017.01) G06V 20/40(2022.01)G06V 20/52(2022.01) G06V 10/774(2022.01) G06V 10/764(2022.01) (54)发明名称 一种特征提取模型构建和垃圾检测方法及 装置 (57)摘要 本发明公开了一种特征提取模型构建和垃 圾检测方法及装置， 特征提取模型构建方法包 括： 根据获取到的第一垃圾图像数据建立垃圾暴 露目标检测数据集； 利用所述垃圾暴露目标检测 数据集对第一预设模型进行训练得到垃圾目标 检测模型； 利用所述垃圾目标检测模 型对第二垃 圾图像数据进行检测得到垃圾目标和非垃圾目 标； 对所述垃圾目标和非垃圾目标进行分类并对 分类结果进行合并建立分类数据集； 利用所述分 类数据集训练预设分类模型得到特征提取模型， 所述特征提取模型用于提取所述分类数据集中 垃圾目标和非垃圾目标的特 征向量。 权利要求书2页 说明书10页 附图3页 CN 114818868 A 2022.07.29 CN 114818868 A 1.一种特 征提取模型构建方法， 其特 征在于， 包括： 根据获取到的第一垃圾图像数据建立垃圾 暴露目标检测数据集； 利用所述垃圾 暴露目标检测数据集对第一预设模型进行训练得到垃圾目标检测模型； 利用所述垃圾目标检测模型对第二垃圾图像数据进行检测得到垃圾目标和非垃圾目 标； 对所述垃圾目标和非垃圾目标进行分类并对分类结果进行合并建立分类数据集； 利用所述分类数据集训练预设分类模型得到特征提取模型， 所述特征提取模型用于提 取所述分类数据集中垃圾目标和非垃圾目标的特 征向量。 2.根据权利要求1所述的方法， 其特 征在于， 所述方法还 包括： 根据获取到的人 车非图像数据建立人 车非目标检测数据集； 利用所述人 车非目标检测数据集对第二预设模型进行训练得到人 车非目标检测模型。 3.根据权利要求1所述的方法， 其特征在于， 所述根据获取到的第 一垃圾图像数据建立 垃圾暴露目标检测数据集， 包括： 获取街道的监控视频 数据并从视频中确定存在垃圾场景的视频 数据； 将所述存在垃圾场景的视频数据抽帧得到图像数据并进行去重处理得到第一垃圾图 像数据； 对标注所述第一垃圾图像数据中的垃圾目标并根据标注的垃圾目标建立垃圾暴露目 标检测数据集。 4.一种垃圾检测方法， 其特 征在于， 包括： 利用预先建立的垃圾目标检测模型和人车非目标检测模型对待检测图像进行检测确 定垃圾目标信息和人 车非目标 垃圾信息； 根据所述垃圾目标信息对应的第一位置信息和人车非目标垃圾信息对应的第二位置 信息， 将位于人 车非目标 上的垃圾目标进行 过滤得到第一检出 垃圾目标信息； 根据第一检出垃圾目标信息对第一检出垃圾目标进行裁剪并利用 如权利要求1－3中 任一项的特征提取模型构建方法构建的特征提取模型对第一检出垃圾目标进行特征向量 提取得到目标 特征向量； 将所述目标特征向量与预设数据库中的数据进行比对， 确定第 一检出垃圾目标对应的 属性信息， 其中所述预设数据库中预先存储有 所述垃圾分类数据集中每一个垃圾目标和非 垃圾目标的属性信息与特 征向量的关系索引； 根据所述属性信息将第一检出垃圾目标中的非垃圾目标进行过滤得到第二检出垃圾 目标信息 。 5.根据权利要求4所述的方法， 其特征在于， 所述根据所述属性信 息将第一检出垃圾目 标中的非垃圾目标进行 过滤得到第二检出 垃圾目标信息之后， 所述方法还 包括： 将所述第二检出 垃圾目标信息对应的特 征向量存 储到预设数据库中； 当所述第二检出垃圾目标经过审核后确定为垃圾， 则在预设数据库中更新所述第 二检 出垃圾目标的属性信息 。 6.根据权利要求4所述的方法， 其特征在于， 将所述目标特征向量与 预设数据库中的数 据进行比对， 确定第一检出 垃圾目标对应的属性信息， 包括： 根据所述第一检出 垃圾目标对应的特 征向量确定第一检出 垃圾目标对应的K近邻；权　利　要　求　书 1/2 页 2 CN 114818868 A 2根据所述第一检出 垃圾目标对应的K近邻查询K近邻对应的属性信息； 根据所述K近邻对应的属性信息确定第一检出 垃圾目标对应的属性信息 。 7.根据权利要求4所述的方法， 其特征在于， 所述根据所述属性信 息将第一检出垃圾目 标中的非垃圾目标进行 过滤得到第二检出 垃圾目标信息， 包括： 根据所述第 一检出垃圾目标对应的特征向量确定第 一检出垃圾目标对应的K近邻与第 一检出垃圾目标对应的特 征向量之间的距离； 根据第一检出垃圾目标对应的K近邻和第 一检出垃圾目标对应的特征向量之间的距离 计算第一检出 垃圾目标对应垃圾属性的权 重； 根据所述第一检出垃圾目标对应垃圾属性的权重确定第一检出垃圾目标中的非垃圾 目标并进行 过滤得到第二检出 垃圾目标信息 。 8.一种特 征提取模型构建装置， 其特 征在于， 包括： 第一建立模块， 用于根据获取到的第一垃圾图像数据建立垃圾 暴露目标检测数据集； 第一训练模块， 用于利用所述垃圾暴露目标检测数据集对第 一预设模型进行训练得到 垃圾目标检测模型； 检测模块， 用于利用所述垃圾目标检测模型对第 二垃圾图像数据进行检测得到垃圾目 标和非垃圾目标； 分类模块， 用于对所述垃圾目标和非垃圾目标进行分类并对分类结果进行合并建立分 类数据集； 第一确定模块， 用于利用所述分类数据集训练预设分类模型得到特征提取模型， 所述 特征提取模型用于提取 所述分类数据集中垃圾目标和非垃圾目标的特 征向量。 9.一种垃圾检测装置， 其特 征在于， 包括： 第二确定模块， 用于利用预先建立的垃圾目标检测模型和人车非 目标检测模型对待检 测图像进行检测 确定垃圾目标信息和人 车非目标 垃圾信息； 第一过滤模块， 用于根据所述垃圾目标信 息对应的第 一位置信 息和人车非目标垃圾信 息对应的第二位置信息， 将位于人车非目标上的垃圾目标进 行过滤得到第一检出垃圾目标 信息； 提取模块， 用于根据第 一检出垃圾目标信 息对第一检出垃圾目标进行裁剪并利用如权 利要求1－3中任一项的特征提取模型构建方法构建的特征提取模型对第一检出垃圾 目标 进行特征向量提取得到目标 特征向量； 比对模块， 用于将所述目标特征向量与预设数据库中的数据进行比对， 确定第一检出 垃圾目标对应的属性信息， 其中所述预设数据库中预先存储有所述垃圾分类数据集中每一 个垃圾目标和非垃圾目标的属性信息与特 征向量的关系索引； 第二过滤模块， 用于根据所述属性信 息将第一检出垃圾目标中的非垃圾目标进行过滤 得到第二检出 垃圾目标信息 。 10.一种电子设备， 其特征在于， 包括： 至少一个处理器； 以及与 所述至少一个处理器通 信连接的存储器； 其中， 所述存储器存储有 可被所述至少一个处理器执行的指 令， 所述指 令 被所述至少一个处理器执行， 以使所述至少一个处理器执行如权利要求1 ‑3任一项所述的 特征提取模型构建方法的步骤， 或执 行如权利要求 4‑7任一所述的垃圾检测方法的步骤。权　利　要　求　书 2/2 页 3 CN 114818868 A 3