买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：中国科学院自动化研究所

摘要：本发明提供一种基于单张图像的三维人体重建方法及相关设备，涉及图像处理技术领域，所述方法包括：将单张人体图像输入全局编码器，获取第一身体参数和全局二维特征；将第一手部特征、第一头部特征以及单张人体图像输入局部解码器，获取第一手部参数和第一头部参数；第一手部特征和所述第一头部特征是从全局二维特征中分离出来的；将第一身体参数、第一手部参数和第一头部参数输入部件交互模块进行部件交互，得到三维人体重建结果；部件交互模块用于基于第一身体参数、第一手部参数和第一头部参数进行身体、手部和头部之间的信息交互，以调整第一身体参数、第一手部参数和第一头部参数。本发明提高了三维人体重建结果的精度。

主权项：1.一种基于单张图像的三维人体重建方法，其特征在于，包括：将单张人体图像输入全局编码器，获取第一身体参数和全局二维特征；将第一手部特征、第一头部特征以及所述单张人体图像输入局部解码器，获取第一手部参数和第一头部参数；所述第一手部特征和所述第一头部特征是从所述全局二维特征中分离出来的；将所述第一身体参数、所述第一手部参数和所述第一头部参数输入部件交互模块进行部件交互，获取三维人体重建结果；所述部件交互模块用于基于所述第一身体参数、所述第一手部参数和所述第一头部参数进行身体、手部和头部之间的信息交互，以调整所述第一身体参数、所述第一手部参数和所述第一头部参数；所述部件交互模块包括：三维数据交互模块和三维二维交互模块；将所述第一身体参数、所述第一手部参数和所述第一头部参数输入部件交互模块进行部件交互，得到三维人体重建结果，包括：将所述第一身体参数、所述第一手部参数和所述第一头部参数输入所述三维数据交互模块，得到第二身体参数、第二手部参数和第二头部参数；所述三维数据交互模块用于基于所述第一身体参数分别调整所述第一手部参数和所述第一头部参数；基于调整后的所述第一手部参数和调整后的所述第一头部参数调整所述第一身体参数；将所述第二身体参数、所述第二手部参数和所述第二头部参数输入三维二维交互模块，得到所述三维人体重建结果；所述三维二维交互模块用于分别将所述第二身体参数、所述第二手部参数和所述第二头部参数投影到图像坐标系，并基于投影结果与真实投影之间的误差，分别对所述第二身体参数、所述第二手部参数和所述第二头部参数进行调整；所述三维数据交互模块包括：第一softmax层和第二softmax层；所述将所述第一身体参数、所述第一手部参数和所述第一头部参数输入所述三维数据交互模块，得到第二身体参数、第二手部参数和第二头部参数，包括：将所述第一身体参数输入所述第一softmax层后，分别与所述第一手部参数和所述第一头部参数进行相乘，得到所述第二手部参数和所述第二头部参数；将所述第二手部参数和所述第二头部参数分别输入所述第二softmax层后，与所述第一身体参数进行相乘，得到所述第二身体参数。

全文数据：

权利要求：

百度查询： 中国科学院自动化研究所 基于单张图像的三维人体重建方法及相关设备