买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
摘要:本公开提供一种全息视点生成方法、系统、计算机存储介质及电子设备,属于计算机视觉技术领域,其可解决现有的渲染算法的效率过低,不能满足实时要求的问题。本公开的全息视点生成方法包括生成粗糙的立体对象,根据目标视点确定两个参考视点,并将两个参考视点所对应的姿态图像矫正至位于同一水平面,渲染出两参考视点的粗糙深度图,并进一步转化为粗糙的第一视差图和第二视差图;利用第一神经网络模型优化出精细的第三视差图和第四视差图,并反投影为三维点云,最后将三维点云颜色投影到目标视点上,并利用第二神经网络模型补全优化渲染结果,得到最终的目标视点图像。本公开可用于准确估计立体对象,实时渲染对象新视点。
主权项:1.一种全息视点生成方法,其特征在于,所述全息视点包括多个不同的参考视点,所述方法包括:获取不同参考视点的采集装置所采集对象的姿态图像,并基于所采集的多张所述姿态图像,通过第一预设算法生成立体对象;基于目标视点,从多个所述参考视点中确定第一参考视点和第二参考视点,以及所述第一参考视点和所述第二参考视点所对应的姿态图像,所述第一参考视点对应的姿态图像为第一参考图像,第二参考视点对应的姿态图像为第二参考图像;对所述第一参考图像和所述第二参考图像进行矫正,分别得到矫正后的第一参考图像和矫正后的第一参考视点;以及矫正后的第二参考图像和矫正后的第二参考视点,以使矫正后的所述第一参考图像和校正后的所述第二参考图像位于同一水平面;将所述立体对象分别渲染至所述矫正后的第一参考视点和所述矫正后的第二参考视点,得到第一深度图像和第二深度图像;以及根据所述第一深度图像、所述第二深度图像以及深度图与视差图的对应关系,计算得到所述矫正后的第一参考视点的第一视差图和矫正后的第二参考视点的第二视差图;根据所述第一视差图、第二视差图、矫正后的第一参考图像和矫正后的第二参考图像,并基于第一神经网络模型对所述第一视差图和所述第二视差图进行优化,分别得到第三视差图和第四视差图;以及基于所述第三视差图、第四视差图、深度图与视差图的对应关系,计算得到第三深度图和第四深度图;利用所述第三深度图和第四深度图对矫正后的第一参考图像和矫正后的第二参考图像进行反投影生成三维点云,并将所述三维点云渲染至所述目标视点上,得到所述目标视点对应的目标视点图像。
全文数据:
权利要求:
百度查询: 京东方科技集团股份有限公司 清华大学 全息视点生成方法、系统、计算机存储介质及电子设备
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。