买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
摘要:本发明公开了一种基于特征嵌入和平滑策略的高保真手部化身生成方法。包括以下步骤:首先构建初始手部网格模型;接着利用特征嵌入模块预测手部形变位移、反照率和线性混合蒙皮权重,以实现手部细节的精细重建;最后采用基于网格模型的神经渲染方法,利用网格拓扑一致性和来自特征嵌入模块的潜空间特征向量,实现对精细网格的逼真渲染。本发明提高了手部细节的重建精度;提出部分感知的拉普拉斯平滑策略,减少伪影产生,确保在渲染过程中手部的精细化特征得以保留体现;能够实现在多样化姿势下的高保真手部几何和纹理的实时获取。
主权项:1.一种基于特征嵌入和平滑策略的高保真手部化身生成方法,其特征在于,包括以下步骤:S1:获取多视角手部图像数据集,数据集中包含不同视角下的多个手部图像样本;S2:根据一个手部图像样本构建初始手部网格模型以及生成三个特征嵌入模块对应的均值网格模型特征;S3:基于初始手部网格模型和三个特征嵌入模块对应的均值网格模型特征,利用多视角手部图像数据集对三个特征嵌入模块和神经网络渲染器分别进行训练后,获得优化的三个特征嵌入模块和最终的神经网络渲染器以及更新的手部网格模型;S4:对于实际手部图像序列,结合当前手部网格模型,根据一张手部图像对当前三个特征嵌入模块进行迭代训练后,获得优化的三个特征嵌入模块以及更新的手部网格模型;再利用最终的神经网络渲染器对更新的手部网格模型进行图像渲染后,获得该手部图像对应的高保真的2D手部渲染图像;S5:重复S4,对实际手部图像序列中的其他手部图像依次进行图像渲染后,获得对应的高保真的2D手部渲染图像,从而获得手部渲染图像序列。
全文数据:
权利要求:
百度查询: 浙江大学 一种基于特征嵌入和平滑策略的高保真手部化身生成方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。