买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:奈安蒂克公司
摘要:公开了一种场景重建模型,该场景重建模型输出针对一系列输入图像的高度场。针对每个输入图像,该模型预测深度图并且提取特征图。该模型利用针对图像的预测的深度图和相机位姿构建3D模型。该模型对3D模型进行射线投射以确定针对场景的原始高度场。该模型利用原始高度场以从与高度场上的位置相对应的特征图采样特征。该模型将采样的特征聚合成聚合特征图。该模型基于聚合特征图对细化高度场进行回归。该模型基于原始高度场和细化高度场的组合来确定最终高度场。利用最终高度场,客户端设备可以生成在由客户端设备捕获的真实世界图像上增强的虚拟内容。
主权项:1.一种计算机实现的方法,包括:接收由移动设备的相机组件捕获的场景的实时图像数据;将所述场景的所述实时图像数据输入到场景重建模型中;从所述场景重建模型接收所述场景的最终高度场,所述最终高度场包括所述场景的每个2D位置处的高度值,其中所述场景重建模型通过以下方式生成所述最终高度场:针对所述图像数据中的每个图像,基于所述图像来预测深度图,针对所述图像数据中的每个图像,基于所述图像来提取特征图,基于所述图像的所预测的所述深度图来生成原始高度场,基于所述图像的所述特征图来生成聚合特征图,基于所述聚合特征图对细化高度场进行回归,以及将所述最终高度场确定为所述原始高度场和所述细化高度场的组合;以及使用所述最终高度场来生成用于结合所述场景的所述实时图像数据显示的虚拟内容。
全文数据:
权利要求:
百度查询: 奈安蒂克公司 来自输入图像数据的高速实时场景重建
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。