基于增强现实的数字化手术系统关键技术研究

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:magicMan555
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机技术与数字医学的不断发展,计算机辅助手术给临床诊断和手术治疗带来了巨大的进步,其基于图像引导、手术规划的手术模式有效地解决了传统外科手术中对病灶部位定位的问题,推动了外科手术朝着精准化和微创化方向发展。而在临床实践中,由于不能直观地看到病灶部位的三维结构,医生需要在屏幕和病灶部位之间来回切换视野,这样不仅影响操作的连贯性和手术的效率,而且有可能增加手术的风险。为此,本文利用增强现实(Augmented Reality,AR)这一前沿技术,实现术前规划模型与病灶部位的配准融合,在术中为医生提供直观的患者病灶部位的三维结构信息。本文主要研究内容如下:利用单目视觉和RGBD类算法开发了基于SLAM(Simultaneous localization and mapping)定位的增强现实数字化手术系统,该系统实现了将术前规划的模型准确定位在SLAM重建的空间中,实现了虚拟模型与真实模型定位融合的效果,该系统实现了比较稳定的静态配准效果;利用大律法、轮廓提取等图像处理算法,开发了可识别跟踪二维标识符的增强现实手术系统,该系统实现了动态识别跟踪二维标识符,并将虚拟模型准确定位在二维标识符处。在SLAM算法基础上,为了实现虚拟模型与真实模型的实时动态配准融合,本文利用红外定位跟踪设备实时定位跟踪真实模型和HoloLens头盔的运动,提出了Camera坐标系到HoloLens参考架坐标系转换矩阵的手眼标定算法,标定出了Camera坐标系到HoloLens参考架坐标系的转换矩阵;提出基于四元数的点配准算法,解决了增强现实手术系统中虚拟模型和真实模型的配准问题。利用四元数插值算法解决了虚拟模型的姿态平滑问题,基于四元数标定出了手术器械尖点的位置。在定位配准算法研究基础之上,本文基于MixedRealityToolkit、IGSTK、Unity、QT等开源SDK和开发工具,开发了基于光学定位跟踪的增强现实手术系统,对该系统进行了模型试验,并设计精度试验测试了系统的误差,在光学定位跟踪仪坐标系下x方向上的平均误差为17.26mm,y方向上的平均误差为13.70mm,在z方向上的平均误差为20.71mm,系统配准的稳定性优于同类系统。综上所述,本文主要研究了基于增强现实的数字化手术系统的定位配准技术,研究了SLAM定位配准的算法,实现了稳定准确的静态定位配准;研究了二维标识符的识别算法,实现了比较稳定的动态跟踪;研究了增强现实的手术系统,实现了对目标模型稳定可靠的动态跟踪配准。本文的研究促进了医学数字化的发展,具有非常重要的临床应用价值与潜力。
其他文献
目的对Oxford人工单髁膝关节置换术治疗膝关节内侧间室骨性关节炎(OA)的患者进行术后X线及CT三维图像评价,阐明应用CT三维图像重建技术测量假体位置的可行性和优越性,并对假
金属氧化物气敏材料具有灵敏高、成本低和使用寿命长等优点,广泛应用于生产和生活相关的各个领域。其中,以CuO、ZnO、Fe2O3、Co3O4和NiO为代表的金属氧化物常被用作气敏材料
牛栎树叶中毒,又叫牛青杠树叶中毒,俗称水肿病,阴肾癀.是由于家畜采食大量栎树嫩枝叶和花而引起的一种中毒病。本病主要在每年阳历4月初至5月中旬,即清明、谷雨和立夏三个节气前后
随着建筑业的快速发展,建筑行业具有无限潜力的经济利益被很多企业看中,因此诸多企业无论是否具有实施工程的实力,无限制地增大建筑行业的利益,甚至为了得到建筑工程项目施工的权
<正>1 概述医学参数是泛指在生物医学领域中,所有需要定量表达的指标,按照其参数种类大体可分为如下10类:(1)生物力学类参数;(2)生物化学类参数;(3)医用热学类参数;(4)医用
建筑产业在国内乃至世界都表现出发展迅猛的态势。然而,在人民收入日益增加的形势下,人们对住房等建筑物的要求也不断提高。建筑产业创新技术的研究受到广大学者和有关机构的关