买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
摘要:本发明提供一种基于人工标注引导的交互式手术案例指导方法、系统、存储介质和电子设备,涉及模型配准领域。本发明中,在术前CT模型上选取特征标记点、在彩色图像帧上点取术中对应标记点;然后基于三维高斯溅射渲染的3D高斯三维模型进行非刚性配准,获取术中CT模型;接着对术中CT模型进行高斯初始化并优化;之后接收医生在术中时刻彩色图像帧上标记的ROI区域,分别完成3D高斯与CT高斯采样;最后基于GPU排序与块渲染策略分开渲染两种高斯模型,获取用于交互式手术案例指导的原始图像与CT图像的融合图像。本发明可以呈现出更精确的组织解剖信息,实现精准决策,尤其有助于新手医生观测不同手术案例在不同手术时刻的手术特性、提高手术经验认知。
主权项:1.一种基于人工标注引导的交互式手术案例指导方法,其特征在于,包括:基于术前nii体数据,获取术前CT模型及其第一灰度值信息集合,并接收医生在所述术前CT模型上的点标记,获取3D标记点三维坐标集合;获取腹腔镜手术的彩色图像帧序列,接收医生在当前时刻的彩色图像帧上的点标记,获取与所述3D标记点三维坐标集合对应的2D标记点uv坐标集合,以采用Ransac-PnP算法求解术前到术中坐标系的刚性变换矩阵,获取刚性配准后的三维点云集合;基于三维高斯溅射的腹腔镜手术场景三维重建方法,获取当前时刻的3D高斯三维模型;并采用V2snet方法将所述三维点云集合与当前时刻的3D高斯三维模型进行非刚性配准,获取术中CT模型;对所述术中CT模型进行CT高斯初始化,获取CT高斯模型;对所述术中CT模型进行插值,利用插值后的点云模型,基于预设的相机位姿渲染得到相应的CT灰度图像及深度图;并将所述CT灰度图像及深度图作为监督信号,对所述CT高斯模型进行优化。
全文数据:
权利要求:
百度查询: 合肥工业大学 基于人工标注引导的交互式手术案例指导方法和系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。