(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210686835.1 (22)申请日 2022.06.16 (71)申请人 昆山国显光电有限公司 地址 215300 江苏省苏州市昆山市开发区 龙腾路1号 4幢 (72)发明人 陈昊　朱家兵　 (74)专利代理 机构 北京远智汇知识产权代理有 限公司 1 1659 专利代理师 鲁艳萍 (51)Int.Cl. G06T 5/00(2006.01) H04N 5/232(2006.01) (54)发明名称 一种显示装置及屏下拍照处 理方法 (57)摘要 本发明实施例公开了一种显示装置及屏下 拍照处理方法。 屏下拍照处理方法， 应用于显示 装置， 所述显示装置包括设置于屏下的第一摄像 头和设置于非屏下的第二摄像头， 所述屏下拍照 处理方法包括： 获取用户采用第一摄像头拍摄的 第一图像； 采用第一图像恢复模 型对所述第一图 像进行处理， 得到第一恢复图像； 其中， 所述第一 图像恢复模型根据所述第一摄像头和所述第二 摄像头在第一预设条件下拍摄的图像的差异所 确定。 本发 明提高了设置于屏下的摄像头的拍照 图像质量。 权利要求书3页 说明书16页 附图8页 CN 115100054 A 2022.09.23 CN 115100054 A 1.一种屏下拍照处理方法， 应用于显示装置， 所述显示装置包括设置于屏下的第一摄 像头和设置 于非屏下的第二摄 像头， 其特 征在于， 所述屏下拍照处 理方法包括： 获取用户采用第一摄 像头拍摄的第一图像； 采用第一图像恢 复模型对所述第 一图像进行处理， 得到第 一恢复图像； 其中， 所述第一 图像恢复模型根据所述第一摄像头和所述第二摄像头在第一预设条件下拍摄的图像的差 异所确定 。 2.根据权利要求1所述的方法， 其特征在于， 所述显示装置还包括用于模拟所述第 一摄 像头屏下拍照的第三摄像头， 所述第三摄像头拍摄图像时光线穿过透明遮挡件后进入所述 第三摄像头； 所述方法还 包括： 向用户展示所述第一恢复图像； 接收到用户的图像优化指令后， 采用第 一图像转换模型对所述第 一图像进行处理得到 第一转换图像， 并采用第二图像恢复模型对所述第一转换图像进行处理得到第二恢复图 像； 其中， 所述第一图像转换模型根据所述第一摄像头和所述第三摄像头在第二预设条件 下拍摄的图像的差异确定， 所述第二图像恢复模型根据所述第二摄像头和所述第三摄像头 在第三预设条件下拍摄的图像的差异所确定 。 3.根据权利要求2所述的方法， 其特 征在于， 还 包括： 将所述第二恢复图像向用户展示； 接收到用户的第一图像校准指令后， 控制第二摄像头启动， 并获取用户采用第二摄像 头拍摄第一校准物体得到的第一校准图像； 控制第三摄像头启动， 并获取用户采用第 三摄像头拍摄第 一校准物体得到的第 二校准 图像； 根据所述第一校准图像和所述第二校准图像的差异确定第一后置屏下图像恢复系数 校准矩阵； 采用所述第一后置屏下图像恢复系数校准矩阵对所述第一转换图像进行处理得到第 一校准恢复图像； 向用户展示所述第 一校准恢 复图像， 并在接收到用户点击输入的第 一图像继续校准指 令后对所述第一后置屏下图像恢复系数校准矩阵进行迭代优化， 采用迭代优化后的第一后 置屏下图像恢复系数校准矩阵对所述第一转换图像重新进 行处理得到第一校准恢复图像， 直至用户不再点击 输入第一图像继续校准指令； 根据最终确定的所述第一后置屏下图像恢复系数校准矩阵更新所述第二图像恢复模 型。 4.根据权利要求1 ‑3任一项所述的方法， 其特 征在于， 还 包括： 接收到用户点击输入的第二图像校准指令后， 启动第一摄像头， 并获取用户采用第一 摄像头拍摄的第二校准物体的第三校准图像； 启动第二摄像头， 并获取用户采用第二摄像头拍摄第二校准物体得到的第四校准图 像； 根据第三校准图像和第四校准图像之间的差异确定前置屏下图像恢复系数 校准矩阵；权　利　要　求　书 1/3 页 2 CN 115100054 A 2采用所述前置屏下图像恢 复系数校准矩阵对所述第 一图像进行处理， 得到第 二校准恢 复图像； 向用户展示所述第 二校准恢 复图像， 并在接收到用户点击输入的第 二图像继续校准指 令后对所述前置屏下图像恢复系数校准矩阵进 行迭代优化， 采用迭代优化后的前置屏下图 像恢复系数校准矩阵对所述第一图像重新进 行处理得到第二校准恢复图像， 直至用户不再 点击输入第二图像继续校准指令； 根据所述前置屏下图像恢复系数 校准矩阵更新所述第一图像恢复模型。 5.根据权利要求 4所述的方法， 其特 征在于， 还 包括： 接收到用户的第二图像校准指令后， 启动第三摄像头， 并获取用户采用第三摄像头拍 摄第二校准物体得到的第五校准图像； 根据第三校准图像和第五校准图像之间的差异确定前置屏下图像转换系数 校准矩阵； 根据第四校准图像和第五校准图像之间的差异确定第二后置屏下图像恢复系数校准 矩阵； 采用前置屏 下图像转换系数校准矩阵对所述第 一图像进行处理得到第 二转换图像， 并 采用第二后置屏下图像恢复系数校准矩阵对所述第二转换图像进行处理得到第三校准恢 复图像； 向用户展示所述第 三校准恢 复图像， 并在接收到用户的第 二图像继续校准指令后对所 述前置屏下图像转换系数校准矩阵和所述第二后置屏下图像恢复系数校准矩阵进行迭代 优化， 采用迭代优化后的前置屏下图像转换系数校准矩阵对所述第一图像重新进 行处理得 到第二转换图像， 并采用迭代优化后的第二后置屏下图像恢复系数校准矩阵对重新处理得 到的第二转换图像进 行处理得到第三校准恢复图像， 直至用户不再点击输入第二图像继续 校准指令； 根据所述前置屏下图像转换系数 校准矩阵更新所述第一图像转换模型； 根据所述第二后置屏下图像恢复系数 校准矩阵更新所述第二图像恢复模型。 6.根据权利要求2所述的方法， 其特 征在于， 采用第一图像恢复模型对所述第一图像进行处 理， 得到第一恢复图像包括： 通过第一图像恢 复模型选择与当前拍摄环境条件对应的前置屏 下图像恢 复系数矩阵， 其中， 所述第一图像恢复模型包括多个不同的环境条件分别对应的前置屏下图像恢复系数 矩阵； 相应的， 采用第一图像转换模型对所述第一图像进行处理得到第一转换图像， 并采用 第二图像恢复模型对所述第一 转换图像进行处 理得到第二恢复图像， 包括： 通过第一图像转换模型选择与当前拍摄环境条件对应的前置屏 下图像转换系数矩阵， 以及通过所述第二图像恢复模型选择与当前拍摄环境条件对应的后置屏下图像转换系数 矩阵； 其中， 所述第一图像转换模型包括多个不同的环境条件分别对应的前置屏下图像转 换系数矩阵， 所述第二图像恢复模型包括多个不同的环境条件分别对应的后置屏下图像恢 复系数矩阵。 7.根据权利要求6所述的方法， 其特 征在于： 所述前置屏下图像恢复系数矩阵根据所述第一摄像头和所述第二摄像头在相同位置 和相同环境条件下拍摄的同一预设物体的图像的差异以及在相同位置和相同环境条件下权　利　要　求　书 2/3 页 3 CN 115100054 A 3