用于存储成像数据的重叠区以产生优化拼接图像的设备及方法.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN110663245A(43)申请公布日2020.01.07(21)申请号201780087612.0(74)专利代理机构北京律盟知识产权代理有限责任公司1(22)申请日2017.12.191287代理人江葳(30)优先权数据15/406,1752017.01.13US(51)Int.Cl.H04N5/232(2006.01)(85)PCT国际申请进入国家阶段日H04N5/247(2006.01)2019.08.28(86)PCT国际申请的申请数据PCT/US2017/0673922017.12.19(87)PCT国际申请的公布数据WO2018/132231EN2018.07.19(71)申请人高途乐公司地址美国加利福尼亚州(72)发明人A·阿巴斯C·杜阿迪-普莱文T·麦克米伦权利要求书2页说明书18页附图8页(54)发明名称用于存储成像数据的重叠区以产生优化拼接图像的设备及方法(57)摘要本发明涉及用于拼接图像或重新拼接先前拼接图像的设备及方法。具体来说，在一个实施方案中，所揭示系统在原始拼接过程期间保存拼接信息及/或原始重叠源数据。在拼接图像的后续检索、渲染及/或显示期间，可灵活地增强及/或重新拼接原始拼接图像以改进原始拼接质量。此外，所揭示解决方案的实际应用使得用户能够在具有有限处理能力的装置(例如移动电话或其它捕获装置)上从多个源图像创建及拼接宽视场FOV全景图。此外，后处理拼接允许所述用户从一个图像投射转换到另一个图像投射而没有保真度损失(或具有可接受损失水平)。CN110663245ACN110663245A权利要求书1/2页1.一种用于根据第一拼接质量拼接源图像的方法，所述方法包括：从两个或更多个相机获得两个或更多个源图像；识别所述所获得两个或更多个源图像的至少一个重叠区；对所述所获得两个或更多个源图像进行后处理以创建经后处理图像；以及存储所述经后处理图像及与所述所识别至少一个重叠区相关联的信息。2.根据权利要求1所述的方法，其进一步包括显示所述经后处理图像的至少一部分。3.根据权利要求2所述的方法，其中所述后处理进一步包括确定要在所述显示中使用的投射。4.根据权利要求3所述的方法，其进一步包括基于所述所确定投射来拼接所述经后处理图像的至少一部分。5.根据权利要求2所述的方法，其中所述后处理进一步包括确定要显示的视口。6.根据权利要求5所述的方法，其进一步包括基于所确定视口拼接所述经后处理图像的至少一部分。7.根据权利要求2所述的方法，其中所述后处理进一步包括：(i)确定一或多个装置资源限制，以及(ii)至少部分地基于所述所确定一或多个限制来配置所述后处理的一或多个算法运算。8.根据权利要求5所述的方法，其进一步包括至少部分地基于所述所确定一或多个装置资源限制来仅执行所述经后处理图像的至少一部分的部分拼接。9.一种设备，其经配置以根据第一拼接质量拼接源图像，所述设备包括：两个或更多个相机，其特征在于两个或更多个对应视场FOV，所述两个或更多个对应FOV特征在于至少一个重叠区；处理器设备；及非暂时性计算机可读媒体，其与所述处理器设备进行数据通信，并且包括一或多个指令，所述一或多个指令在由所述处理器设备执行时使经配置以拼接源图像的所述设备：从所述两个或更多个相机获得两个或更多个图像；识别所述所获得两个或更多个图像的至少一个重叠区；对所述所获得两个或更多个图像进行后处理以创建经后处理图像；及存储所述经后处理图像及与所述所识别至少一个重叠区相关联的一或多个信息。10.根据权利要求9所述的设备，其中基于以下中的至少一者的物理定向来识别所述所获得两个或更多个图像的所述所识别至少一个重叠区：(i)所述两个或更多个相机，及/或(ii)所述两个或更多个FOV。11.根据权利要求9所述的设备，其中基于在所述所获得两个或更多个图像内检测到的一或多个共享特征来识别所述所获得两个或更多个图像的所述所识别至少一个重叠区。12.根据权利要求9所述的设备，其中所述后处理包括所述所获得两个或更多个图像的切割及羽化拼接。13.根据权利要求9所述的设备，其中所述后处理包括所述所获得两个或更多个图像的基于深度的拼接。14.根据权利要求9所述的设备，其中所述所存储一或多个信息包括表示拼接置信度度量的数据。2CN110663245A权利要求书2/2页15.根据权利要求9所述的设备，其中所述所存储一或多个信息包括与所述至少一个重叠区相关联的原始像素信息。16.根据权利要求9所述的设备，其中所述两个或更多个图像捕获组件包括面向前方的第一相机及面向后方的第二相机。17.根据权利要求9所述的设备，其中所述两个或更多个相机的特征在于对应两个或更多个超半球形FOV。18.一种经配置以将特征在于