龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：浙江大学
摘要：本发明公开了一种面向VR设备的照片级真实场景重建和沉浸式交互系统。本发明通过用户的摄像设备采集真实环境图像，基于NeRF模型训练图像得到带有语义信息的Mesh模型和对应的纹理特征图像，从而从二维图像中高质量重建出三维场景模型，并利用Unity引擎和VR设备实现真实环境和虚拟环境的无缝结合，为用户提供了一种沉浸式的视觉体验。为了提高交互性，本发明创新地采用了依据用户语音信息进行操作控制的方式，通过麦克风实时捕捉用户语音指令，并将其快速准确地转化为对应的文本信息，完成一系列语义化操作。本发明通过融合NeRF模型和VR技术，实施实时、方便的三维场景重建，并以用户体验为导向，实现了高度沉浸的交互科技，将本系统的实用性推向了新的高度。
主权项：1.一种面向VR设备的照片级真实场景重建和沉浸式交互系统，其特征在于，包括：图像采集与训练模块：用户使用摄像设备对真实环境进行图像采集，将采集的图像作为训练视图，基于NeRF模型训练图像得到带有语义信息的Mesh模型和对应的纹理特征图像，从而从二维图像中高质量重建出三维场景模型和或物体模型；虚拟环境实时渲染模块：通过Unity引擎加载重建后的三维场景模型和或物体模型，Unity引擎与VR设备建立连接并实现实时渲染，用户通过VR设备可视化Unity引擎渲染的虚拟场景和或物体；语音控制交互模块：检测用户麦克风采集的音频流中的关键词并转化为文本信息，将文本信息解析成语义控制指令，实现从文本到语义的控制和对应视角切换。
全文数据：
权利要求：
百度查询： 浙江大学 面向VR设备的照片级真实场景重建和沉浸式交互系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号