基于生成对抗策略和图卷积神经网络的大脑点云重建模型研究

来源 :中国科学院大学(中国科学院深圳先进技术研究院) | 被引量 : 0次 | 上传用户:feiniao6688
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着外科医学方法的不断发展,微创手术技术和机器人引导手术介入技术等尖端医学手术技术已逐渐应用于脑外科手术。依托类似手术技术,如脑机接口(Brain-computer interface,BCI)类的新一代生物科技得以成为可能。但是,这类手术也对术中的实时信息采集能力提出了新的要求。由于医生在手术过程中无法直接观察手术靶点和目标,他们的临床经验通常不能有效的发挥。因此,多种术中成像导航技术被提出以缓解这一问题,因为成像全面、清晰,磁共振成像(Magnetic Resonance Imaging,MRI)导航是目前的主要术中导航技术。然而,现今的MRI导航技术也存在许多问题:1)MRI导航时间效率不高。完整成像的MRI像素数量在百万数量级,其计算和处理过程极大的丧失了实时性。2)因为手术室的MRI系统多是中场MRI系统,功能成像获得的图像的信噪比不会很高,确定的位置不会很准确。3)MRI不能直接可视化,而从MRI中提取手术器官的3D模型步骤复杂,降低了导航软硬件的自动化程度。结合深度学习技术的器官3D重建方法就是为了找到一些准确且可控的视觉增强方法以改进MRI导航技术,从而获取更多的补充信息而被提出的。但是,目前尚无工作在脑部手术领域探究该技术。本文的目的就是提出一个生成误差小、稳定性高的大脑3D重建方法以填补这一空白。本文设计了一种用于大脑微创手术场景的树形图卷积生成对抗网络模型,它具有强大的特征自适应提取能力和学习能力,可以在短时延下重建精确的大脑3D点云(Point cloud)。它在生成器部分应用了树结构的图卷积网络以充分挖掘点云的图节点关联性并提高生成准确度。对抗性生成的策略则保证了多模块可以有效达到纳什均衡,模型能更有效的逼近生成分布。另外,现有传统医学图像,在手术中经常存在以下两个问题中的至少一个:首先,由于光环境限制和手术计划之外的各种可能的视觉污染(如局部出血),它们往往是不完整的。其次,它们的分辨率不一定能满足成倍增长的手术精细度要求。针对第一个问题,本文设计了一个结合自注意力机制和生成对抗策略的分层形状感知网络来从不完整的2D图像中重建大脑的3D点云结构,并设计了多种模块以尽可能确保缺失补全的可信度。针对第二个问题,本文设计了一个具有两阶段上采样生成能力的金字塔形状感知网络以在重建常规低密度点云后,继续生成点的数量更多、细节更精细的高密度点云。同时,本文也在各个任务中有针对性的设计了结合对抗性损失、Kullback-Leibler散度约束、重建损失和感知损失组成的混合损失函数,以提高模型的训练效率。最后,本文还在各项研究中通过大量的定型试验、定量实验、消融实验和对比实验以证明设计的网络模型的良好性能。
其他文献
<正>课程标准对小学阶段估算能力的培养提出了更加明确的目标和要求:人教版教材在三位数加三位数估算的编排上作出了很大的改进。一、新旧教材估算教学内容的对比三位数加位数估算教学,在人教版新旧教材中都是以生活情境为载体,利用估算方法来解决实际问题,培养孩子估算策略。
期刊
单目深度估计是计算机视觉和深度学习中一个基本、重要的任务,也是一个典型的回归问题,在自动驾驶、场景重建、机器人导航等热门领域都有着广泛的应用。过去的十年见证了深度卷积神经网络在计算机视觉领域的飞速发展,近年来,随着深度卷积神经网络被应用于单目深度估计任务,基于深度学习的方法在单目深度估计任务上表现出了优越的性能。本文就单目深度估计任务及其应用中的损失函数设计和网络结构进行了研究。在基于学习的方法中
学位
内吗啡肽-2(endomorphin-2,EM-2)是哺乳动物体内广泛存在的μ-阿片受体的内源性配体,具有高亲和力和高选择性。EM-2通过与阿片受体结合在体内具有多种生理活性,包括调节心脑血管系统、消化系统、食欲和情绪等,此外,EM-2在外周神经系统和中枢神经系统具有高效的镇痛活性。相比于吗啡等传统镇痛药物,EM-2具有更高的镇痛活性和更低的副作用,然而,EM-2作为天然肽类药物,还具有相应的局限
学位
太赫兹成像技术是利用频率为0.1-10 THz之间的电磁辐射对目标进行二维成像的技术。由于太赫兹波具有光子能量低、穿透性和光谱分辨能力的优势,太赫兹成像技术被广泛应用于安防检测、生物医学、产品质检等领域。不同于可见光领域,目前成熟商用的太赫兹相机或者面阵探测器较难获得,大大制约了太赫兹成像技术的实际推广。得益于单像素成像技术发展,太赫兹单像素成像利用太赫兹单点探测器和成像算法即可实现二维成像,降低
学位
<正>今天,中国行政管理学会召开2022年年会暨学术研讨会,围绕深入学习贯彻党的二十大精神,全面贯彻习近平新时代中国特色社会主义思想,探讨进一步推动政府职能转变、完善政府治理体系、推进依法行政,具有重要实践意义和理论价值。在此,我受肖捷国务委员委托,代表国务院办公厅向会议的召开表示热烈祝贺!
期刊
以数字化转型赋能课堂教学全方位系统性变革,持续推动课堂教学数字化转型进程,促进课堂教学高质量发展,是“双减”背景下课堂创新的应然选择。研究顺应教育数字化转型战略行动,聚焦新时代课堂价值观和课堂减负提质增效的本质意蕴,揭示了课堂教学数字化转型的内涵与特征,强调课堂理念的全数据赋能、课堂空间的全场域融合、课堂结构的全要素协同,构建了课堂教学数字化转型的理论模型,明晰了彰显学科特色的课堂教学数字化转型关
期刊
鹿血,鹿科动物梅花鹿或马鹿的血液,是我国的传统的名贵中药,距今已经接近两千年的药用历史。鹿血具有丰富的营养成分和广泛的药用价值,现以证明其具有抗疲劳、抗肿瘤、延缓衰老、增强免疫力等多种疗效。我国虽然鹿资源较为丰富,但对鹿血产品的开发却相对简单粗糙,仍旧是处于对原血液进行简单加工的阶段,缺乏对鹿血资源的深度利用,主要是因为对鹿血活性功效成分的研究不足,因此宝贵的鹿血资源没有得到充分利用。本文对梅花鹿
学位
表观遗传学是指当DNA序列不发生改变时,发生的能够遗传的亲代与子代间的信息传递。包括DNA甲基化(DNA methylation)、组蛋白乙酰化(Covalent histone modification)、RNA甲基化(RNA methylation)等等。同样,RNA上有许多化学修饰,普遍存在于真核生物中,这些修饰以前被认为是静态的,不可逆的。目前为止,已经有超过100多种的RNA修饰被发现,
学位
大脑网络为许多脑部疾病的诊断提供了重要的见解。传统上可以通过分析多种脑网络类型的连接,如功能连接和基于解剖学的结构连接,进而确定网络关系;但传统网络分析中不能将各项连接进行融合,无法得到更广泛的有效信息。本文分别通过对癫痫信号检测、致痫区域检测和癫痫扩散网络三个方面进行研究,其中癫痫信号检测作为分类问题为后续研究提供了预处理和分析的基础方法;在此基础上进行更为复杂的致痫区域检测,并提出了一种基于属
学位
贵金属氧化物(Ru O2、Ir O2)作为公认最优的析氧电催化剂受到成本和储量的影响限制了其工业化应用,因此开发廉价、高效的析氧反应电催化剂具有迫切需要。在非贵金属催化剂中过渡金属氧化物(transition metal oxides,TMOs)由于具有优异的理论析氧性能、成本低廉等优势得到了广泛的研究。目前过渡金属电催化剂面临的主要问题在于催化活性提高困难,而高价金属(如W、Mo、Nb等)掺杂是
学位