(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210258553.1 (22)申请日 2022.03.16 (71)申请人 左志超 地址 210000 江苏省南京市玄武区小营 北 路570号 (72)发明人 左志超　 (51)Int.Cl. G06V 40/16(2022.01) G06V 40/20(2022.01) G06V 20/52(2022.01) G06V 10/764(2022.01) G06K 9/62(2022.01) (54)发明名称 一种基于结构化的模式识别集成服 务系统 (57)摘要 本发明公开了一种基于结构化的模式识别 集成服务系统， 包括图像质量评价模块、 模式识 别集成服务模块和会议照片自动筛选模块， 所述 图像质量评价模块用于对待筛选图片进行第一 次初步筛选以及对会议场景定义， 所述模式识别 集成服务模块用于对第一次筛选后留下的照片 进行多维度模式识别， 所述会议照片自动筛选模 块用于对经过模式识别后的照片进行第二次筛 选输出， 所述图像质量评价模块与模式识别集成 服务模块电连接， 所述模式识别集成服务模块与 会议照片自动筛选模块电连接， 利用通用图像质 量评价指标进行会议照片第一次筛选， 结合三个 维度的模式识别算法， 进行会议照片第二次筛选 输出， 本发明， 具有 会议照片自动筛 选的特点。 权利要求书4页 说明书9页 附图1页 CN 114648794 A 2022.06.21 CN 114648794 A 1.一种基于结构化的模式识别集成服务系统， 包括图像质量评价模块、 模式识别集成 服务模块和会议照片自动筛选模块， 其特征在于： 所述图像质量评价模块用于对待筛选图 片进行第一次初步筛选以及 对会议场景定义， 所述模式识别集成服务模块用于对第一次筛 选后留下的照 片进行多维度模式识别， 所述会议照片自动筛选模块用于对 经过模式识别后 的照片进行第二次筛选输出， 所述图像质量评价模块与模式识别集成服务模块电连接， 所 述模式识别集成服 务模块与会议照片自动筛 选模块电连接； 所述模式识别集成服务模块包括人脸表情识别模块、 文字物体识别模块和姿态动作识 别模块， 所述人脸表情识别模块用于利用算法对会议照片 中的参会人员的表情、 人数进行 识别记录， 所述文字物体识别模块用于利用算法对会议照 片中呈现的存在文字的横幅、 PPT 进行识别记录， 所述姿态动作 识别模块用于利用算法对会议照片中的参会 人员的姿势动作 进行识别。 2.根据权利要求1所述的一种基于结构化的模式识别集成服务系统， 其特征在于： 所述 图像质量评价模块包括第一次筛选模块、 筛选阈值模块、 会议场景定义模块和会议照片特 定质量模块， 所述第一次筛选模块用于通过通用图像质量评价指标对所有待筛选照片进 行 评价筛选， 所述筛选阈值模块为规定照片筛选通过 的临界值， 所述会议场景定义模块用于 对针对会议照 片中的会议场景进 行定义， 所述会议照 片特定质量模块用于对不同场景下会 议照片的评价标准进行制 定， 所述第一次筛选模块与筛选阈值模块电连接， 所述会议场景 定义模块与会议照片特定质量模块电连接 。 3.根据权利要求2所述的一种基于结构化的模式识别集成服务系统， 其特征在于： 所述 第一次筛选模块包括对比度子模块、 信息量子模块和清晰度子模块， 所述对比度子模块用 于选用能显示图片色彩信息的对比度进行筛选判断， 所述信息量子模块用于选用能表达图 片丰富度的图片信息来那个进 行判断， 所述清晰度子模块用于选用能影响观感的图片清晰 度进行判断； 所述会议场景定义模块包括严肃类会议子模块、 相对自由类会议子模块和自由类会议 子模块， 所述严肃类会议子模块用于根据自由度划分的自由度较低的会议类型， 所述相对 自由类会议子模块用于通过会议照片中呈现检测出的行为动作的数量相对较多自由度相 对较高的会议类型， 所述自由类会议子模块用于根据会议照片 中行为动作最多、 自由度最 高的会议类型； 所述会议照片特定质量模块包括正脸率子模块和会议参与度子模块， 所述正脸率子模 块用于表征会议照片中人物整体展现出的关键点， 所述会议参与度子模块用于对会议照 片 整体呈现的人物参与度和丰富度进行评价。 4.根据权利要求3所述的一种基于结构化的模式识别集成服务系统， 其特征在于： 所述 会议照片自动筛选模块包括第二次筛选判断模块、 人物特写照片模块、 会议整体照片模块 和照片输出模块， 所述第二次筛选判断模块用于根据会议照 片特定质量标准进行第一次筛 选后的照片的第二次筛选， 所述人物特写照片模块用于根据会议照片 中人物姿态动作、 表 情进行标记， 所述会议整体照 片模块用于通过会议照 片中的人物特写点和文字丰富程度进 行判断标记， 所述照片输出模块用于将标记的照片进行判断是否合格并输出， 所述人物特 写照片模块、 会议整体照片模块与照片输出模块电连接 。 5.一种基于权利要求1 ‑4中任一项所述的一种基于结构化的模式识别集成服务系统的权　利　要　求　书 1/4 页 2 CN 114648794 A 2识别方法， 所述方法包括以下步骤： 步骤S1： 将所有需要进行筛选的照片素材， 按照通用图像质量评价指标设定第一次筛 选合格阈值， 根据信息量加权和进行第一次合格照片筛 选； 步骤S2： 根据照片中呈现的会议参会人员形成的自由度， 定义不同类型下的场景会议 以及与会议相关的异常行为； 步骤S3： 调用会议照片的质量评价标准， 利用人脸表情、 文字物体和姿态动作多个维度 的模式识别集成服务， 识别照片 中包含的内容， 判断划分照片所属会议 阶段和所属会议类 型； 步骤S4： 进行照片阶段类型的自动命名标记， 调用不同阶段类型照片的筛选标准， 进行 第二次会议场景照片筛 选判断， 根据判断结果将筛 选照片输出。 6.根据权利要求5所述的一种基于结构化的模式识别集成服务系统， 其特征在于： 所述 步骤S1进一 步包括以下步骤： 步骤S11： 图像初步筛选阶段， 针对照片的色彩对比度、 包含的信息量和清晰度， 对待筛 选照片的质量进行第一次筛 选； 步骤S12： 用图像灰度反差的大小衡量 图像的对比度D， 按照图像中不同级的灰度级出 现的概率， 进行图像平均不确定性的度量， 得到照片的信息嫡值X， 通过图像微小细节反差 变化的速率， 即图像多维方向上密度变化的速率表征图像的相对清晰程度Q； 步骤S13： 取三个信息量的加权和S， 作为初步筛选阶段是否合格的值判断， 计算公式 为： S＝D*25％+X*25％+Q* 50％ 式中， D为照片的色彩对比度， X为照片包 含的信息量， Q 为照片图像的清晰程度； 步骤S14： 设定照片第一次筛选合格阈值K， 当S≥K， 即照片三个信息量加权和S达到或 超过了第一次筛选合格阈值， 该照片被保留进入下一步判断筛选， 当S<K， 照片三个信息量 加权和S小于设定的第一次筛 选合格阈值， 照片被直接放弃。 7.根据权利要求6所述的一种基于结构化的模式识别集成服务系统， 其特征在于： 所述 步骤S2进一 步包括以下步骤： 步骤S21： 根据照片中呈现的会议参会人员形成的自由度， 制定会议照片的自动筛选标 准， 定义会议场景和其中包 含的异常行为， 进行会议分类； 步骤S22： 会议的自由度 是根据会议期间被允许产生的行为动作的多少， 进行会议性质 的界定， 按被允许的行为动作量将自由度划分为3个等级； 步骤S23： 当被允许的行为动作 量在3种形式内， 为自由度的第一等级， 定义为严肃类会 议照片， 当被允许的行为动作量在3至5种形式内， 则为自由度的第二等级， 定义为相对自由 类会议照片， 当被允许的行为动作量在5种 形式外， 则为自由度的第三等级， 定义为自由类 会议照片； 步骤S24： 将三种类型会议照片中不允许存在的行为动作， 定义为异常行为动作， 将异 常行为动作数量的多少作为第二次筛 选的判断条件之一。 8.根据权利要求7所述的一种基于结构化的模式识别集成服务系统， 其特征在于： 所述 步骤S3进一 步包括以下步骤： 步骤S31： 对会议照片进行人脸表情识别， 判断照片中呈现的参会人员情绪状态和在参权　利　要　求　书 2/4 页 3 CN 114648794 A 3