(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210673750.X (22)申请日 2022.06.15 (71)申请人 极智视觉科技 （合肥） 有限公司 地址 230088 安徽省合肥市高新区天达路8 号D座三楼 (72)发明人 李晶　史春晖　卜允利　 (74)专利代理 机构 合肥信诚兆佳知识产权代理 事务所 (特殊普通合伙) 34159 专利代理师 张影 (51)Int.Cl. G06V 40/18(2022.01) G06V 10/762(2022.01) G06V 10/34(2022.01) G06T 7/292(2017.01)G06T 7/11(2017.01) G06T 3/40(2006.01) (54)发明名称 一种眼动追 踪模型校正方法及装置 (57)摘要 本发明公开了一种眼动追踪模型校正方法 及装置， 所述方法包括： 在人机交互界面上显示 当前校正点， 并提示用户注视所述当前校正点， 再利用阵列设置的若干个摄像头同时拍摄用户 的眼球图像； 构建虚拟锥体， 根据所述虚拟椎体 与所拍的摄眼球图像上的截交线包围的区域作 为裁剪区域， 根据所述裁剪区域从所拍摄眼球图 像中裁取出对应的子图像； 利用各个摄像头对应 的子图像拼接成针对当前校正点的目标眼球图 像； 从校正点集合中除已经被遍历的校正点以外 的其他校正点中选择之一作为当前校正点， 并返 回执行所述在人机交互界面上显示当前校正点 的步骤， 直至所有校正点都被遍历； 根据所有校 正点对应的目标眼球图像进行校正。 权利要求书2页 说明书6页 附图2页 CN 115019381 A 2022.09.06 CN 115019381 A 1.一种眼动追踪模型 校正方法， 其特 征在于， 所述方法包括： 从校正点集合中选择一个校正点作为当前校正点， 在人机交互界面上显示当前校正 点， 并提示用户注视所述当前校正点， 再利用阵列设置的若干个摄像头同时拍摄用户的眼 球图像， 且摄 像头的数量 为两个或者两个以上； 针对每一个摄像头， 以所述摄像头的光轴方向为中心轴， 预设锥角构建虚拟锥体， 根据 所述虚拟椎体与所拍的摄眼球图像上的截交线包围的区域作为裁剪区域， 根据所述裁剪区 域从所拍摄眼球图像中裁取 出对应的子图像； 利用各个摄像头对应的子图像拼接成针对当前校正点的目标眼球图像； 从校正点集合 中除已经被遍历的校正点以外的其他校正点中选择之一作为当前校正点， 并返回执行所述 在人机交互界面上显示当前校正点的步骤， 直至所有校正点都被遍历； 根据所有校正点对 应的目标眼球图像进行 校正。 2.根据权利要求1所述的一种眼动追踪模型校正方法， 其特征在于， 所述校正点集合的 确定过程包括： 根据用户操作当前设备的频率筛选出用户使用当前设备的高峰时段， 从历史眼动追踪 数据， 筛选出目标眼动追踪数据； 针对每一条眼动追踪数据， 将所述目标眼动追踪数据对应的视觉焦点映射到当前设备 屏幕上， 得到 视觉焦点集合； 对所述视觉焦点集合中包含的视觉焦点进行聚类处理， 得到若干个焦点聚类； 根据各 个焦点聚类所包含视觉焦点的分布特征， 获取对应的校正点数量， 并根据校正点数量获取 对应的校正 点分布数据， 根据各个焦点聚类对应的校正 点分布数据生成校正 点集合。 3.根据权利要求2所述的一种眼动追踪模型校正方法， 其特征在于， 所述根据 各个焦点 聚类所包含视觉焦点的分布特征， 获取对应的校正点数量， 并根据校正点数量获取对应的 校正点分布数据， 包括： 针对若干个焦点聚类中的当前焦点聚类， 获取当前焦点聚类的中心， 并获取所包含所 有视觉焦点之间连接线段 的平均值， 以当前焦点聚类的中心为圆心， 将所述平均值作为半 径所圈定的区域作为目标区域； 根据目标区域在所有视觉焦点聚类的目标区域总面积的占 比获取当前焦点聚类对应的校正点的数量； 将当前焦点聚类对应的校正点随机 分布在对应 的目标区域中， 得到针对当前焦点聚类的校正 点分布数据。 4.根据权利要求3所述的一种眼动追踪模型校正方法， 其特征在于， 在根据目标区域在 所有视觉焦点聚类的目标区域总面积的占比获取当前焦点聚类对应的校正点的数量时， 所 述方法还 包括： 判断当前焦点聚类对应的校正点的数量是否小于一， 若是， 将当前聚类焦点对应的校 正点的数量设定为 一。 5.根据权利要求1所述的一种眼动追踪模型校正方法， 其特征在于， 所述若干个摄像头 的确定方法包括： 向周围广播拍摄协助请求， 其中， 所述拍摄协助请求中包括当前设备自身的第 一坐标； 以使接收到拍摄协助请求的协助设备根据自身的第二坐标以及厂商预先标定的最佳拍摄 距离计算出自身的最佳拍摄范围， 在第一 坐标位于最佳拍摄范围时， 响应拍摄协助请求； 将响应拍摄协助请求的协助设备 所携带的摄 像头作为拍摄用户的眼球图像的摄 像头。权　利　要　求　书 1/2 页 2 CN 115019381 A 26.根据权利要求5所述的一种眼动追踪模型校正方法， 其特征在于， 所述预设锥角的获 取过程包括： 根据摄像头的分布位置， 平均划分每一个 摄像头对应的眼球区域； 根据对应的眼球区域以及摄 像头相对于眼球的距离计算出 预设锥角的大小。 7.根据权利要求6所述的一种眼动追踪模型校正方法， 其特征在于， 所述利用各个摄像 头对应的子图像拼接成针对当前 校正点的目标眼球图像， 包括： 根据对应的摄像头的坐标， 将各个子 图像的像素点转换到同一坐标系中， 根据各个子 图像对应的眼球区域， 将各个子图像拼接为完整眼球图像， 将完整的眼球图像作为 目标眼 球图像。 8.根据权利要求1所述的一种眼动追踪模型校正方法， 其特征在于， 所述根据 所有校正 点对应的目标眼球图像进行 校正， 包括： 获取目标眼球图像中的反射光斑， 对反射光斑的边缘进行平滑 处理， 得到平滑后轮廓； 将平滑后轮廓的线条拟合为椭圆， 将椭圆的中心点作为角膜反射中心， 根据所述角膜反射 中心以及目标眼球图像进行 校正。 9.一种眼动追踪模型 校正装置， 其特 征在于， 所述装置包括： 显示模块， 用于从校正点集合中选择一个校正点作为当前校正点， 在人机交互界面上 显示当前校正点， 并提示用户注视所述当前校正点， 再利用阵列设置的若干个摄像头同时 拍摄用户的眼球图像， 且摄 像头的数量 为两个或者两个以上； 裁剪模块， 用于针对每一个摄像头， 以所述摄像头的光轴方向为中心轴， 预设锥角构建 虚拟锥体， 根据所述虚拟椎体与所拍的摄眼球图像上 的截交线包围的区域作为裁剪区域， 根据所述裁 剪区域从所拍摄眼球图像中裁取 出对应的子图像； 拼接模块， 用于利用各个摄像头对应的子图像拼接成针对当前校正点的目标眼球图 像； 从校正点集合中除已经被遍历的校正点以外的其他校正点中选择之一作为当前校正 点， 并返回执行所述在人机交互界面上显示当前校正点的步骤， 直至所有校正点都被遍历； 根据所有校正 点对应的目标眼球图像进行 校正。 10.根据权利要求9所述的一种眼动追踪模型校正装置， 其特征在于， 所述校正点集合 的确定过程包括： 根据用户操作当前设备的频率筛选出用户使用当前设备的高峰时段， 从历史眼动追踪 数据， 筛选出目标眼动追踪数据； 针对每一条眼动追踪数据， 将所述目标眼动追踪数据对应的视觉焦点映射到当前设备 屏幕上， 得到 视觉焦点集合； 对所述视觉焦点集合中包含的视觉焦点进行聚类处理， 得到若干个焦点聚类； 根据各 个焦点聚类所包含视觉焦点的分布特征， 获取对应的校正点数量， 并根据校正点数量获取 对应的校正 点分布数据， 根据各个焦点聚类对应的校正 点分布数据生成校正 点集合。权　利　要　求　书 2/2 页 3 CN 115019381 A 3