(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210744903.5 (22)申请日 2022.06.27 (71)申请人 影石创新科技股份有限公司 地址 518100 广东省深圳市宝安区新 安街 道海旺社区兴业路1100号金利通金融 中心大厦2栋1 101,1102,1103 (72)发明人 王果　姜文杰　蔡锦霖　 (74)专利代理 机构 北京汇思诚业知识产权代理 有限公司 1 1444 专利代理师 汪源 (51)Int.Cl. H04N 5/232(2006.01) H04N 5/265(2006.01) H04N 13/156(2018.01) (54)发明名称 全景立体图像的生成方法、 装置和电子设备 (57)摘要 本发明实施例提供了一种全景立体图像的 生成方法、 装置和电子设备。 该方法包括： 根据获 取的多个鱼眼图像， 生成每个鱼眼图像对应的左 眼经纬度图像和右眼经纬度图像； 提取多个左眼 经纬度图像之间的第一拼接区域得到多个第一 拼接区域， 对每个所述第一拼接区域进行图像融 合以生成左眼全 景图像； 提取多个右眼经纬度图 像之间的第二拼接区域得到多个第二拼接区域， 对每个所述第二拼接区域进行图像融合 以生成 右眼全景图像； 根据所述左眼全 景图像和所述右 眼全景图像， 生成全景立体图像， 从而消除了断 层或重影现象。 权利要求书2页 说明书13页 附图6页 CN 115174805 A 2022.10.11 CN 115174805 A 1.一种全景立体图像的生成方法， 其特 征在于， 包括： 根据获取的多个鱼眼图像， 生成每个鱼眼图像对应的左眼经纬度图像和 右眼经纬度图 像； 提取多个左眼经纬度图像之间的第 一拼接区域得到多个第 一拼接区域， 对每个所述第 一拼接区域进行图像融合以生成左眼全景图像； 提取多个右眼经纬度图像之间的第 二拼接区域得到多个第 二拼接区域， 对每个所述第 二拼接区域进行图像融合以生成右眼全景图像； 根据所述左眼全景图像和所述右眼全景图像， 生成全景立体图像。 2.根据权利要求1所述的方法， 其特征在于， 所述根据获取的多个鱼眼图像， 生成每个 鱼眼图像对应的左眼经纬度图像和右眼经纬度图像， 包括： 在设置的左眼空白经纬度图上划分出左眼视角拼接块区域， 在所述左眼视角拼接块 区 域中， 根据鱼眼图像到经纬度图的投影关系， 对所述鱼眼图像进 行经纬度图展开， 生成所述 鱼眼图像对应的左眼经纬度图像； 在设置的右眼空白经纬度图上划分出右眼视角拼接块区域， 在所述右眼视角拼接块 区 域中， 根据鱼眼图像到经纬度图的投影关系， 对所述鱼眼图像进 行经纬度图展开， 生成所述 鱼眼图像对应的右眼经纬度图像。 3.根据权利要求2所述的方法， 其特征在于， 所述在 设置的左眼空白经纬度图上划分出 左眼视角拼接块区域， 包括： 根据鱼眼图像到经纬度图的投影关系， 将所述鱼眼图像的中心点投影到所述左眼空白 经纬度图上形成中心 点的投影， 将所述中心 点的投影所在的经线定义为左眼空白经纬度图 中心线； 将所述左眼空白经纬度图的距离左眼空白经纬度图中心线左侧设定角度值的经线作 为左眼视角中心线； 在所述左眼空白经纬度图中以所述左眼视角中心线为视场角中心线取设定视场角的 图像区域作为所述左眼视角拼接块区域。 4.根据权利要求1所述的方法， 其特征在于， 所述在 设置的右眼空白经纬度图上划分出 右眼视角拼接块区域， 包括： 根据鱼眼图像到经纬度图的投影关系， 将所述鱼眼图像的中心点投影到所述右眼空白 经纬度图上形成中心 点的投影， 将所述中心 点的投影所在的经线定义为右眼空白经纬度图 中心线； 将所述右眼空白经纬度图的距离右眼空白经纬度图中心线右侧设定角度值的经线作 为右眼视角中心线； 在所述右眼空白经纬度图中以所述右眼视角中心线为视场角中心线取设定视场角的 图像区域作为所述右眼视角拼接块区域。 5.根据权利要求1所述的方法， 其特征在于， 所述对每个所述第 一拼接区域进行图像融 合以生成左眼视角全景图像， 包括： 将多个第一 拼接区域投影到单位球面上， 得到单位球面上的多个第一待拼接区域； 将单位球面上的多个第 一待拼接区域分别映射到单位球面对应的柱面上， 得到多个第 一待拼接区域对应的柱面区域；权　利　要　求　书 1/2 页 2 CN 115174805 A 2计算多个第一待拼接区域对应的柱面区域的左图像和右图像之间的光 流场； 根据每个柱面区域的左图像和 右图像之间的光流场， 对每个所述第 一拼接区域的图像 进行融合， 以生成所述左眼全景图像。 6.根据权利要求1所述的方法， 其特征在于， 所述对每个所述第 二拼接区域进行图像融 合以生成右眼视角全景图像， 包括： 将多个第二 拼接区域投影到单位球面上， 得到单位球面上的多个第二待拼接区域； 将单位球面上的多个第 二待拼接区域分别映射到单位球面对应的柱面上， 得到多个第 二待拼接区域对应的柱面区域； 计算多个第二待拼接区域对应的柱面区域的 的左图像和右图像之间的光 流场； 根据每个柱面区域的左图像和 右图像之间的光流场， 对每个所述第 二拼接区域的图像 进行融合， 以生成所述右眼全景图像。 7.根据权利要求1所述的方法， 其特征在于， 所述根据所述左眼全景图像和所述右眼全 景图像， 生成全景立体图像， 包括： 将所述左眼全景图像进行重投影， 生成所述左眼可视画面； 将所述右眼全景图像进行重投影， 生成所述右眼可视画面； 将所述左眼可视画面和所述右眼可视画面进行同步处 理， 生成所述全景立体图像。 8.一种全景立体图像的生成装置， 其特 征在于， 包括： 鱼眼图像获取模块， 用于获取多个鱼眼 图像； 经纬度图像生成模块， 用于根据获取的多个鱼眼图像， 生成每个鱼眼图像对应的左眼 经纬度图像和右眼经纬度图像； 融合模块， 用于提取多个左眼经纬度图像之间的第一拼接区域得到多个第一拼接区 域， 对每个所述第一拼接区域进行图像融合以生成左眼全景图像； 提取多个右眼经纬度图 像之间的第二拼接区域得到多个第二拼接区域， 对每个所述第二拼接区域进 行图像融合以 生成右眼全景图像； 生成模块， 用于根据所述左眼全景图像和所述右眼全景图像， 生成全景立体图像。 9.一种电子设备， 其特征在于， 所述电子设备包括多个用于获取鱼眼图像的鱼眼镜头； 所述电子设备还包括存储器和处理器， 所述存储器用于存储包括程序指令的信息， 所述处 理器用于控制程序指令的执行， 其特征在于， 所述程序指令被处理器加载并执行时实现权 利要求1至7任意 一项所述的全景立体图像的生成方法的步骤。 10.一种存储介质， 其特征在于， 所述存储介质包括存储的程序， 其中， 在所述程序运行 时控制所存储介质所在电子设备执行权利要求1至7中任一项所述的全景立体图像的生成 方法的步骤。权　利　要　求　书 2/2 页 3 CN 115174805 A 3