(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211139797.4 (22)申请日 2022.09.19 (71)申请人 泽景 （西安） 汽车电子有限责任公司 地址 710075 陕西省西安市高新区高新 一 路25号创新大厦N5 01室 (72)发明人 向阳　张波　吕涛　 (74)专利代理 机构 北京律智知识产权代理有限 公司 11438 专利代理师 阚梓瑄 (51)Int.Cl. G06F 3/01(2006.01) G06V 40/16(2022.01) G06V 40/18(2022.01) G06V 20/20(2022.01) B60K 35/00(2006.01)G09G 3/00(2006.01) (54)发明名称 图像处理方法及系统、 装置、 电子设备和存 储介质 (57)摘要 本公开提供一种图像处理方法及系统、 装 置、 电子设备 以及计算机可读存储介质， 涉及增 强现实技术领域。 该方法包括： 确定当前注视点 坐标， 当前注视点坐标用于指示人眼当前注视位 置的坐标； 响应于检测到当前注视点坐标对应的 位置变化指令， 对当前注视点坐标进行坐标转 换， 得到人眼相对于目标设备的目标注视点坐 标； 获取增强现实图像， 根据目标注视点坐标确 定增强现实图像的图像调整参数； 基于图像调整 参数对增强现实图像进行位置调整处理， 以使增 强现实图像处于人眼的可视范围。 本公开可以根 据人眼位置变化自动调整增强现实图像的显示 位置， 使得增强现实图像始终处于人眼的可视范 围， 且无需人工 手动操作。 权利要求书3页 说明书15页 附图5页 CN 115525152 A 2022.12.27 CN 115525152 A 1.一种图像处 理方法， 其特 征在于， 包括： 确定当前注视点 坐标， 所述当前注视点 坐标用于指示人眼当前注视位置的坐标； 响应于检测到所述当前注视点坐标对应的位置变化指令， 对所述当前注视点坐标进行 坐标转换， 得到所述人眼相对于目标设备的目标注视点 坐标； 获取增强现实图像， 根据所述目标注视点坐标确定所述增强现实图像的图像调整参 数； 基于所述图像调整参数对所述增强现实图像进行位置调整处理， 以使所述增强现实图 像处于所述人眼的可视范围。 2.根据权利要求1所述的方法， 其特 征在于， 所述确定当前注视点 坐标， 包括： 通过图像采集设备获取脸部图像； 获取预先训练的脸部特征提取模型， 所述脸部特征提取模型由脸部图像训练集训练得 到； 通过所述脸部特征提取模型对所述脸部图像进行特征提取， 得到脸部图像对应的人眼 信息， 所述人眼信息包括所述当前注视点 坐标。 3.根据权利要求1或2所述的方法， 其特 征在于， 所述方法还 包括： 获取预先存储的人眼参 考位置对应的参 考注视点 坐标； 将所述当前注视点坐标与 所述参考注视点坐标进行对比， 得到所述当前注视点坐标对 应的坐标变化差值； 如果所述坐标变化差值大于或等于预先配置的坐标变化阈值， 则生成所述位置变化指 令。 4.根据权利要求1所述的方法， 其特征在于， 所述当前注视点坐标包括注视点像素坐 标， 所述对所述当前注视点坐标进行坐标转换， 得到所述人眼相对于目标设备 的目标注视 点坐标， 包括： 对所述注视点像素坐标进行物理坐标转换， 得到所述注视点像素坐标对应的注视点物 理坐标； 对所述注视点物理坐标进行三维坐标转换， 得到所述注视点物 理坐标对应的初始三维 注视点坐标； 对所述初始三维注视点 坐标进行设备映射 坐标转换， 得到所述目标注视点 坐标。 5.根据权利要求4所述的方法， 其特征在于， 所述注视点像素坐标包括左眼像素坐标与 右眼像素坐标； 所述对所述注视点像素坐标进行物理坐标转换， 得到所述注视点像素坐标 对应的注视点物理坐标， 包括： 根据所述左眼像素坐标与所述右眼像素坐标， 确定所述人眼对应的中心点像素坐标； 对所述中心点像素坐标进行 所述物理坐标转换， 得到所述注视点物理坐标。 6.根据权利要求4所述的方法， 其特征在于， 所述对所述注视点物理坐标进行三维坐标 转换， 得到所述注视点物理坐标对应的初始三维注视点 坐标， 包括： 获取图像采集设备对应的图像设备坐标系； 确定与所述图像设备坐标系匹配的第一 转换矩阵； 基于所述第 一转换矩阵对所述注视点物理坐标进行三维坐标转换， 得到所述初始三维 注视点坐标。权　利　要　求　书 1/3 页 2 CN 115525152 A 27.根据权利要求4所述的方法， 其特征在于， 所述目标设备包括驾驶设备； 所述对所述 初始三维注视点 坐标进行设备映射 坐标转换， 得到所述目标注视点 坐标， 包括： 获取所述驾驶设备对应的驾驶设备坐标系； 确定与所述驾驶设备坐标系 对应的第 二转换矩阵， 所述第 二转换矩阵基于所述驾驶设 备的物理尺寸信息与所述图像采集设备的设备 标定信息确定； 基于所述第 二转换矩阵对所述初始三维注视点坐标进行设备映射坐标转换， 得到所述 目标注视点 坐标。 8.根据权利要求1所述的方法， 其特征在于， 所述图像调整参数包括平移矩阵与旋转矩 阵， 所述基于所述图像调整参数对所述增强现实图像进行位置调整处 理， 包括： 获取所述增强现实图像的图像显示参数， 所述图像显示参数包括当前显示坐标与当前 旋转角度； 基于所述平 移矩阵对所述增强现实图像的当前显示 坐标进行平 移处理， 及基于所述旋转矩阵对所述增强现实图像的当前旋转角度进行调整处理， 以调 整所述 增强现实图像的显示 位置。 9.根据权利要求1所述的方法， 其特征在于， 所述图像调整参数包括平移矩阵与旋转矩 阵， 所述基于所述图像调整参数对所述增强现实图像进行位置调整处 理， 包括： 获取图像反射镜的反射镜参数， 所述图像反射镜用于反射显示所述增强现实图像； 根据所述平移矩阵与 所述旋转矩阵对所述反射镜参数进行调 整， 以对所述图像反射镜 进行位置调整处 理； 基于经过所述位置调整处理后的图像反射镜显示所述增强现实图像， 以调 整所述增强 现实图像的显示 位置。 10.一种图像处 理系统， 其特 征在于， 包括： 图像采集设备， 用于获取脸部 图像， 基于所述脸部 图像确定人眼对应的当前注视点坐 标； 坐标转换模块， 用于对所述当前注视点坐标进行坐标转换处理， 得到所述人眼相对于 目标设备的目标注视点 坐标； 传输模块， 用于将所述目标注视点 坐标传输 至图像位置调整模块； 所述图像位置调整模块， 用于基于所述目标注视点坐标确定所述增强现实图像的图像 调整参数； 基于所述图像调整参数对所述增强现实 图像进行位置调整处理， 以使所述增强 现实图像处于所述人眼的可视范围。 11.一种图像处 理装置， 其特 征在于， 包括： 当前坐标确定模块， 用于确定当前注视点坐标， 所述当前注视点坐标用于指示人眼当 前注视位置的坐标； 目标坐标确定模块， 用于响应于检测到所述当前注视点坐标对应的位置变化指令， 对 所述当前注视点 坐标进行坐标转换， 得到所述人眼相对于目标设备的目标注视点 坐标； 调整参数确定模块， 用于获取增强现实图像， 根据所述目标注视点坐标确定所述增强 现实图像的图像调整参数； 图像调整模块， 用于基于所述图像调整参数对所述增强现实图像进行位置调整处理， 以使所述增强现实图像处于所述人眼的可视范围。权　利　要　求　书 2/3 页 3 CN 115525152 A 3