(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210745220.1 (22)申请日 2022.06.27 (71)申请人 华为技术有限公司 地址 518129 广东省深圳市龙岗区坂田华 为总部办公楼 (72)发明人 吴凡　王银廷　张一帆　张鹏　 (74)专利代理 机构 北京同达信恒知识产权代理 有限公司 1 1291 专利代理师 田小倩 (51)Int.Cl. H04N 5/232(2006.01) G06N 3/04(2006.01) G06N 3/08(2006.01) G06T 5/50(2006.01) G06T 7/194(2017.01)G06T 15/00(2011.01) (54)发明名称 一种图像处 理方法及终端设备 (57)摘要 本申请涉及图像处理技术领域， 公开了一种 图像处理方法及终端设备， 用以利用终端设备上 的可变光圈摄像头， 结合大光圈图像和小光圈图 像进行深度估计和虚化渲染的图像处理， 从而可 以使得拍摄图像达到较优的背景虚化效果。 该方 法中， 终端设备检测 并响应于用户拍摄指令， 自 动切换多档位光圈， 并基于各档位光圈拍摄得到 多幅图像； 基于所述多幅图像中的至少两幅图像 进行深度计算， 得到相对深度图像； 根据所述相 对深度图像， 划分前景层部分和背景层部分， 并 对所述背景层部分包含的像素点进行模糊渲染； 对模糊渲染之后的背景层部分和所述前景层部 分进行融合， 得到背景虚化图像 。 权利要求书2页 说明书15页 附图4页 CN 115499577 A 2022.12.20 CN 115499577 A 1.一种图像处 理方法， 其特 征在于， 包括： 终端设备检测并响应于用户拍摄指令， 自动切换多档位光圈， 并基于各档位光圈对目 标拍摄场景进行拍摄得到多幅图像； 所述终端设备基于所述多幅图像中的至少两幅图像进行深度计算， 得到相对深度图 像； 所述终端设备根据所述相对深度图像， 得到基于所述目标拍摄场景的前景层部分和背 景层部分， 并对所述背景层部分包 含的像素点进行模糊渲染； 所述终端设备对模糊渲染之后的背景层部分和所述前景层部分进行融合， 得到所述目 标拍摄场景的背景虚化图像。 2.根据权利要求1所述的方法， 其特征在于， 所述基于所述多幅图像中的至少两幅图像 进行深度计算， 得到相对深度图像之前， 所述方法还 包括： 所述终端设备以所述至少两幅图像中的第 一图像作为参考图像， 对所述至少两幅图像 中除所述参考图像之外的各图像分别进行配准对齐； 其中， 所述第一图像为所述至少 两幅 图像中的任一图像。 3.根据权利要求1或2所述的方法， 其特征在于， 所述终端设备基于所述多幅图像中的 至少两幅图像进行深度计算， 得到相对深度图像， 包括： 将所述至少两幅图像作为预先训练 的深度神经网络模型的输入， 得到由所述深度神经 网络模型输出的所述相对深度图像。 4.根据权利要求1至3中任一项所述的方法， 其特征在于， 所述终端设备对模糊渲染之 后的背景层部分和所述前 景层部分进行融合之前， 所述方法还 包括： 将用于指示所述前景层部分的掩膜mask和所述大光圈图像作为预先训练的抠图神经 网络模型的输入， 得到由所述 抠图神经网络模型输出的目标 前景层部分和目标mask； 所述对模糊渲染之后的背景层部分和所述前景层部分进行融合， 得到所述目标拍摄场 景的背景虚化图像， 包括： 对所述模糊渲染之后的背景层部分和所述目标前景层部分进行融合， 基于所述目标 mask得到所述目标拍摄场景的背景虚化图像。 5.根据权利要求1至4中任一项所述的方法， 其特征在于， 所述多档位光圈包括： 第一档 位光圈和第二档位光圈， 所述第一档位高于所述第二档位， 所述基于各档位光圈对目标拍 摄场景进行拍摄得到多幅图像， 包括： 基于所述第一档位 光圈， 得到大光圈图像； 以及， 基于所述第二档位 光圈， 得到小光圈图像。 6.根据权利要求5所述的方法， 其特征在于， 所述终端设备根据所述相对深度图像， 得 到基于所述目标拍摄场景的前 景层部分和背景层部分， 包括： 基于所述大光圈图像得到所述前景层部分； 以及， 基于所述小光圈图像得到所述背景 层部分。 7.根据权利要求1至6中任一项所述的方法， 其特征在于， 所述自动切换多档位光圈之 前， 所述方法还 包括： 确定相机处于大光圈模式。 8.一种终端设备， 其特征在于， 所述终端设备包括多个功能模块； 所述多个功能模块相权　利　要　求　书 1/2 页 2 CN 115499577 A 2互作用， 用于执 行如权利要求1至7中任一项所述的方法。 9.一种终端设备， 其特征在于， 包括至少一个处理器， 所述至少一个处理器与至少一个 存储器耦合， 所述至少一个处理器用于读取所述至少一个存储器所存储的计算机程序， 以 执行如权利要求1至7中任一项所述的方法。 10.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质中存储有指令， 当其在计算机上运行时， 使得计算机执 行如权利要求1至7中任一项所述的方法。 11.一种包含指令的计算机程序产品， 其特征在于， 当所述计算机程序产品在计算机上 运行时， 使得 所述计算机执 行如权利要求1至7中任一项所述的方法。 12.一种终端设备上的图形用户界面， 其特征在于， 所述终端设备具有显示屏、 一个或 多个存储器、 以及一个或多个处理器， 所述一个或多个处理器用于执行存储在所述一个或 多个存储器中的一个或多个计算机程序， 所述图形用户界面包括所述终端设备执行如权利 要求1至7中任一项所述的方法时显示的图形用户界面。权　利　要　求　书 2/2 页 3 CN 115499577 A 3