买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:书行科技(北京)有限公司
摘要:本申请实施例公开了三维人体重建方法、装置、设备、存储介质及程序产品。该方法包括:对视频中的各帧所包含的至少一个对象进行三维人体重建信息提取,得到至少一个对象在各帧中的三维人体重建信息,三维人体重建信息包括人体参数信息;确定视频中出现目标对象的连续N帧;通过三维人体时序模型对目标对象在N帧中的人体参数信息进行时序调整,得到目标对象在N帧中的调整后的人体参数信息;基于目标对象在N帧中的调整后的人体参数信息,得到至少一个对象在各帧中的更新后的三维人体重建信息;基于至少一个对象在各帧中的更新后的三维人体重建信息,得到重建视频。采用本申请实施例能够有效提升三维人体重建视频在时序上的稳定性和准确性。
主权项:1.一种三维人体重建方法,其特征在于,包括:通过三维人体重建模型对视频中的各帧所包含的至少一个对象进行三维人体重建信息提取,得到所述至少一个对象在所述各帧中的三维人体重建信息;其中,所述三维人体重建信息包括人体参数信息;确定所述视频中出现目标对象的连续N帧,N为正整数;将所述目标对象在所述N帧中的人体参数信息输入至三维人体时序模型,通过所述三维人体时序模型对所述目标对象在所述N帧中的人体参数信息进行时序调整,得到所述目标对象在所述N帧中的调整后的人体参数信息;基于所述目标对象在所述N帧中的调整后的人体参数信息,对所述至少一个对象在所述各帧中的三维人体重建信息进行更新,得到所述至少一个对象在所述各帧中的更新后的三维人体重建信息;基于所述至少一个对象在所述各帧中的更新后的三维人体重建信息,进行三维人体重建,得到重建视频;其中,所述三维人体时序模型的训练方法包括:获取训练样本,所述训练样本包括训练视频,以及目标训练对象的第一标注信息,所述第一标注信息用于标注所述目标训练对象在所述训练视频的K帧中的人体参数信息,所述K帧指的是所述训练视频中出现所述目标训练对象的连续帧,K为正整数;对所述训练视频的K帧所包含的目标训练对象进行三维人体重建信息提取,得到所述目标训练对象在所述训练视频的K帧中的人体参数信息;调用初始三维人体时序模型,对所述目标训练对象在所述训练视频的K帧中的人体参数信息进行时序调整,得到所述目标训练对象在所述训练视频的K帧中的调整后的人体参数信息;按照减小所述目标训练对象在所述训练视频的K帧中的调整后的人体参数信息,与所述目标训练对象的第一标注信息的差异的训练方向,对所述初始三维人体时序模型进行训练,得到所述三维人体时序模型;所述三维人体重建模型的训练方法包括:获取训练样本,所述训练样本包括训练视频,以及所述训练视频中的各帧所包含的至少一个训练对象的第二标注信息,所述第二标注信息用于标注相应训练对象在各帧中的人体参数信息;调用初始三维人体重建模型,对所述训练视频中的各帧所包含的至少一个对象进行三维人体重建信息提取,得到所述至少一个训练对象在所述训练视频的各帧中的人体参数信息;按照减小所述至少一个训练对象在所述训练视频的各帧中的人体参数信息,与所述至少一个训练对象的第二标注信息的差异的训练方向,对所述初始三维人体重建模型进行训练,得到所述三维人体重建模型。
全文数据:
权利要求:
百度查询: 书行科技(北京)有限公司 三维人体重建方法、装置、设备、存储介质及程序产品
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。