首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

基于三维高斯的三维内容生成方法、系统、设备及介质 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:中国科学技术大学

摘要:本发明涉及三维建模技术领域,公开了一种基于三维高斯的三维内容生成方法、系统、设备及介质;生成方法包括:将物体的指示文本输入到预训练的点云扩散模型,将点云初始化为三维高斯点;对三维高斯模型进行中期优化;使用预定义的三维高斯过滤方法,在优化过程中进行三维高斯过滤;根据预设的相机采样视角将三维高斯模型渲染为二维图像;使用预定义的重建式生成方法,通过预训练的二维文生图扩散模型对渲染的二维图像进行加噪及去噪,得到用于重建的伪真实图像,使用伪真实图像对三维高斯模型进行监督优化。通过多时间步采样对二维文生图扩散模型进行蒸馏,能够在优化过程中充分利用不同时间步蒸馏出的信息,能够提高优化效率,加快收敛速度。

主权项:1.一种基于三维高斯的三维内容生成方法,其特征在于,包括以下步骤:步骤一、将物体的指示文本输入到预训练的点云扩散模型,生成物体的初始点云,将点云初始化为三维高斯点,三维高斯点构成三维高斯模型;步骤二,对三维高斯模型进行中期迭代优化,得到中期迭代优化后的三维高斯模型;具体包括以下步骤:S21、通过随机采样的相机视角对三维高斯模型进行二维图像的渲染;S22、使用预定义的多时间步采样方法,通过预训练的二维文生图扩散模型对所述三维高斯模型进行三维内容生成指导,对三维高斯模型参数进行优化;S23、使用预定义的三维高斯过滤方法,计算三维高斯模型中每个三维高斯点的重要性分数,进行三维高斯过滤;步骤三、根据预设的相机采样视角将三维高斯模型渲染为一组二维图像;步骤四、使用预定义的重建式生成方法,通过预训练的二维文生图扩散模型对步骤三所渲染的二维图像进行加噪及去噪,得到用于重建的伪真实图像,使用伪真实图像对三维高斯模型进行监督优化。

全文数据:

权利要求:

百度查询: 中国科学技术大学 基于三维高斯的三维内容生成方法、系统、设备及介质

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。