(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211222466.7 (22)申请日 2022.10.08 (71)申请人 浙江大华 技术股份有限公司 地址 310051 浙江省杭州市滨江区滨安路 1187号 (72)发明人 孙璆琛　陈波扬　李合青　陈小彪　 黄萌　刘峻豪　罗正宇　 (74)专利代理 机构 北京康信知识产权代理有限 责任公司 1 1240 专利代理师 赵静 (51)Int.Cl. G06V 20/40(2022.01) G06V 10/44(2022.01) G06V 10/764(2022.01) G06V 10/82(2022.01)G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 视频的识别方法、 装置、 存储介质及电子装 置 (57)摘要 本发明实施例提供了一种视频的识别方法、 装置、 存储介质及电子装置， 其中， 该方法包括： 确定目标视频中包括的当前关键帧图像到目标 帧图像的光流场， 其中， 目标帧图像为目标视频 中包括的在当前关键帧图像 之后的图像； 基于光 流场确定当前关键帧图像到目标帧图像的目标 光流值； 在目标光流值小于或等于预定阈值的情 况下， 基于当前关键帧图像的第一特征图以及光 流场确定目标帧图像的第二特征图； 识别第一特 征图， 确定第一特征图中包括的识别对象， 以及 识别第二特征图， 确定第二特征图中包括的识别 对象。 通过本发明， 解决了相关技术中存在的识 别视频速度慢、 效率低的问题， 达到提高视频识 别速度以及效率的效果。 权利要求书2页 说明书9页 附图4页 CN 115512271 A 2022.12.23 CN 115512271 A 1.一种视频的识别方法， 其特 征在于， 包括： 确定目标视频中包括的当前关键帧图像到目标帧图像的光流场， 其中， 所述目标帧图 像为所述目标视频中包括的在所述当前关键帧图像之后的图像； 基于所述 光流场确定所述当前关键帧图像到所述目标帧图像的目标光 流值； 在所述目标光流值小于或等于预定 阈值的情况下， 基于所述当前关键帧图像的第 一特 征图以及所述 光流场确定所述目标帧图像的第二特 征图； 识别所述第一特征图， 确定所述第一特征图中包括的识别对象， 以及识别所述第二特 征图， 确定所述第二特 征图中包括的识别对象。 2.根据权利要求1所述的方法， 其特征在于， 在基于所述当前关键帧图像的第 一特征图 以及所述 光流场确定所述目标帧图像的第二特 征图之前， 所述方法还 包括： 利用第一卷积层中包括的多个不同尺度的卷积层分别提取所述当前关键帧图像的特 征， 得到多个第三特 征图； 将多个所述第三特征图依次输入至concat层、 shuffle层以及多个卷积层， 得到第四特 征图； 确定所述第四特 征图的通道 注意力向量； 基于所述第四特 征图以及所述 通道注意力向量确定所述第一特 征图。 3.根据权利要求2所述的方法， 其特征在于， 基于所述第四特征图以及所述通道注意力 向量确定所述第一特 征图包括： 确定所述 通道注意力向量中包括的每 个目标通道的向量 值； 确定所述第四特征图中包括的每个所述目标通道的特征值与所述目标通道对应的向 量值的乘积； 将所述乘积构成的特 征图确定为所述第一特 征图。 4.根据权利要求1所述的方法， 其特征在于， 基于所述光流场确定当前关键帧图像到目 标帧图像的目标光 流值包括： 确定所述目标帧图像的清晰度； 在所述清晰度 大于预设清晰度的情况下， 基于所述光流场确定当前关键帧图像到目标 帧图像的目标光 流值。 5.根据权利要求4所述的方法， 其特征在于， 基于所述光流场确定当前关键帧图像到目 标帧图像的目标光 流值包括： 确定所述 光流场中包括的每 个像素点对应的光 流值； 将所述光流值的和确定为所述目标光 流值。 6.根据权利要求1所述的方法， 其特征在于， 在基于所述光流场确定当前关键帧图像到 目标帧图像的目标光 流值之后， 所述方法还 包括： 在所述目标光流值大于所述预定 阈值的情况下， 将所述目标帧图像确定为所述当前关 键帧图像。 7.根据权利要求1所述的方法， 其特征在于， 基于所述当前关键帧图像的第 一特征图以 及所述光流场确定所述目标帧图像的第二特 征图包括： 确定所述 光流场的目标空间分辨 率； 将所述第一特 征图的空间分辨 率调整为所述目标空间分辨 率， 得到第五特 征图；权　利　要　求　书 1/2 页 2 CN 115512271 A 2基于所述第五特 征图以及所述 光流场确定所述第二特 征图。 8.一种视频的识别装置， 其特 征在于， 包括： 第一确定模块， 用于确定目标视频中包括的当前关键帧图像到目标帧图像的光流场， 其中， 所述目标帧图像为所述目标视频中包括的在所述当前关键帧图像之后的图像； 第二确定模块， 用于基于所述光流场确定所述当前关键帧图像到所述目标帧图像的目 标光流值； 第三确定模块， 用于在所述目标光流值小于或等于预定阈值的情况下， 基于所述当前 关键帧图像的第一特 征图以及所述 光流场确定所述目标帧图像的第二特 征图； 识别模块， 用于识别所述第 一特征图， 确定所述第 一特征图中包括的识别对象， 以及识 别所述第二特 征图， 确定所述第二特 征图中包括的识别对象。 9.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质中存储有计算机 程序， 其中， 所述计算机程序被设置为 运行时执 行所述权利要求1至7任一项中所述的方法。 10.一种电子装置， 包括存储器和 处理器， 其特征在于， 所述存储器中存储有计算机程 序， 所述处理器被设置为运行所述计算机程序以执行所述权利要求 1至7任一项中所述的方 法。权　利　要　求　书 2/2 页 3 CN 115512271 A 3