首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种沉浸式场景试衣视频实时生成方法、介质及系统 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:山东博克时代科技开发有限公司

摘要:本发明提供了一种沉浸式场景试衣视频实时生成方法、介质及系统,属于沉浸式场景试衣视技术领域,包括:实时获取试衣人员的多角度图像,并进行预处理;提取试衣人员的面部三维特征和服装三维特征;结合预训练的服装‑形体模型,获得试衣人员的形体三维特征;从预设的试衣场景视频库中选择试衣场景视频,并根据试衣人员的面部和形体特征对模特进行调整;采用Lora微调的方法,建立针对该试衣人员和服装的个性化模型,用于生成试衣人员穿着服装的三维图像;将调整后的面部、身材和服装三维图像融合到选定视频的关键帧中,生成沉浸式试衣视频;采用并行的灰狼捕猎算法进行快速Lora微调优化。实现了针对消费者和服装进行个性化优化。

主权项:1.一种沉浸式场景试衣视频实时生成方法,其特征在于,包括以下步骤:S10、实时获取多个不同拍摄角度的摄像头获取的已穿了试穿服装的试衣人员的多张图像,并预处理得到多张试衣人员的基本图像;S20、对于多张基本图像,提取每一张所述基本图像中试衣人员的面部特征和服装图像特征,并根据拍摄角度采用三维重构的方式,得到试衣人员的面部三维特征和服装三维特征;S30、将所述服装三维特征输入到预先训练好的服装-形体模型,得到试衣人员的形体三维特征;S40、从预先设置好的试衣场景视频库中,获取试衣人员选定的试衣场景视频作为选定视频,所述试衣场景视频库包括多个试衣场景视频,每个试衣场景视频为在对应场景内的身穿的模特的动作视频;S50、基于试衣人员的面部三维特征和形体三维特征,对所述选定视频的关键帧中的模特的面部特征和轮廓进行调整;S60、采用多张基本图像,在所述服装-形体模型上进行Lora微调,得到一个针对所述试衣人员和试穿服装的个性化Lora模型,用于从服装三维特征和服装图像准确推断出试所述衣人员的身穿所述试穿服装后的三维图像;S70、在每一张关键帧中,根据模特的形体图像,计算模特的形体三维特征并输入到所述服装-形体模型+Lora模型,得到模特的调整后的穿有所述试穿服装的服装三维图像;S80、将调整后的模特面部特征、身材特征和服装三维图像融合到选定视频的对应关键帧中,形成试衣视频的关键帧序列,最后通过插值的方法生成试衣人员在选定场景中试衣的沉浸式视频。

全文数据:

权利要求:

百度查询: 山东博克时代科技开发有限公司 一种沉浸式场景试衣视频实时生成方法、介质及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。