恭喜武汉工程大学;武汉逸锦科技有限公司周华兵获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网恭喜武汉工程大学;武汉逸锦科技有限公司申请的专利一种联合流形约束和FB-GAN的人脸变形方法和系统获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN114219742B 。
龙图腾网通过国家知识产权局官网在2025-02-18发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202111055117.6,技术领域涉及:G06T3/4038;该发明授权一种联合流形约束和FB-GAN的人脸变形方法和系统是由周华兵;徐志超;王燕燕;张彦铎;卢涛;陈灯;鲁统伟;李晓林;李迅;朱锐设计研发完成,并于2021-09-09向国家知识产权局提交的专利申请。
本一种联合流形约束和FB-GAN的人脸变形方法和系统在说明书摘要公布了:本发明提供了一种联合流形约束和FB‑GAN的人脸变形方法和系统,通过使用生成对抗神经网络设计出端到端的人脸图像拼接对抗网络FB‑GAN,实现了在人脸变形过程中生成高分辨率的人脸图像的功能。本发明通过人脸变形算法生成高分辨率的人脸图像,解决了传统变形中人脸嘴巴从闭合到张开所导致的嘴巴“扭曲”或“空洞”问题。本发明解决了人脸拼接问题中的颜色差异较大而导致的拼接效果较差的问题,提高了人脸生成图像的真实性。
本发明授权一种联合流形约束和FB-GAN的人脸变形方法和系统在权利要求书中公布了:1.一种联合流形约束和FB-GAN的人脸变形方法,其特征在于:包括以下步骤:S0:搭建系统,包括依次连接的图像拼接模块、人脸融合网络FB-GAN、人脸变形模型;向图像拼接模块输入源图像和目标图像;S1:图像拼接模块剪切目标图像中的张开嘴巴部分并覆盖至源图像的闭合嘴巴部分,得到拼接图像并替换源图像;具体步骤为:设目标图像xtarget、源图像xsource、掩码xmask;掩码xmask是通过标注得到的;目标图像xtarget是嘴巴张开的变形目标图像;源图像xsource是嘴巴闭合的源图像;*表示对应像素的乘积,则拼接图像xcomposite为:xcomposite=xtarget*xmask+xsource*1-xmask;S2:人脸融合网络FB-GAN通过颜色直方图约束、梯度约束、感知损失约束处理拼接图像,得到与拼接图像语义一致的高分辨率的融合图像作为人脸变形的过渡图像,用于消除拼接区域的边界问题和肤色差异问题;设人脸融合网络的生成器为G·,则融合图像xblend为:xblend=Gxcomposite;设对抗损失函数Ladv、目标内容损失函数Lcontent、感知损失函数Lperceptual、梯度损失函数Lgradient、颜色直方图损失函数Lhistogram,设λadv、λcontent、λperceptual、λgradient、λhisogram分别对应表示上述各个损失函数的权重,则人脸融合网络的损失函数Lg为:Lg=λadvladv+λcontentLcontent+λperceptualLperceptual+λgradientLgradient+λhisogramLhistogram;S3:人脸变形模型通过特征引导的移动流行正则最小二乘模型M2RLS-TPS-FG将融合图像的人脸形状转换为目标图像的人脸形状;具体步骤为:S31:构建控制点提取模块,分别提取融合图像xblend和目标图像xtarget上的特征点,对应得到融合人脸特征图xb_feature和目标人脸特征图xt_feature,并将特征图中的特征点作为变形控制点;S32:将融合人脸特征图xb_feature的特征点作为变形起点,将目标人脸特征图xt_feature的特征点作为变形终点,使用基于特征点引导的移动流行正则最小二乘模型M2RLS-TPS-FG进行变形得到最终的变形图像xdeformed;移动流行正则最小二乘模型M2RLS-TPS-FG将TPS核构建的变形函数置于再生核希尔伯特空间中用于求解封闭解;根据TPS核的性质,给定一张人脸图像x,令为取自源图像和目标图像中的对应变形控制点对集合,其中来自源图像,来自目标图像;令为来自源图像的SIFT特征控制点MN;由径向基函数定义TPS核K,对二维图像上的任意一点p得到:Kp,pi=||p-pi||2log||p-pi||,设ci是大小为D+1的列向量;A是尺寸为3×3的矩阵;是u对应的齐次坐标;则将二维人脸图像中任意一点u分为全局仿射变换函数fuu和局部弯曲函数guu为: 设wip=||u-pi||-2α表示权重系数;设φ1表示光滑正则项,用于确保变形结果的光滑性;设φ2表示流形正则项,用于确保变形过程中保留更多源图像中的内蕴结构信息;设λ1用于控制变形复杂度,λ2用于控制图像的内蕴几何结构;则最小化移动流行正则最小二乘模型M2RLS-TPS-FG的误差泛函,估算变形函数为:
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人武汉工程大学;武汉逸锦科技有限公司,其通讯地址为:430074 湖北省武汉市洪山区雄楚大街693号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。