【摘 要】
:
随着人口老龄化的加深,医疗资源短缺的问题也越来越严峻。同时,随着人工智能技术的发展,越来越多的人工智能技术被广泛应用于包括医疗在内的现实生活之中。作为当前人工智能的核心技术之一,强化学习(Reinforcement Learning,RL)在重症室智能决策的应用研究也取得了长足的发展,但仍具有一定的局限性。为了有效的使用强化学习方法,需要预先构建一个合理的奖励函数,这严重依赖于临床医生的个人主观经
论文部分内容阅读
随着人口老龄化的加深,医疗资源短缺的问题也越来越严峻。同时,随着人工智能技术的发展,越来越多的人工智能技术被广泛应用于包括医疗在内的现实生活之中。作为当前人工智能的核心技术之一,强化学习(Reinforcement Learning,RL)在重症室智能决策的应用研究也取得了长足的发展,但仍具有一定的局限性。为了有效的使用强化学习方法,需要预先构建一个合理的奖励函数,这严重依赖于临床医生的个人主观经验,缺乏普适性。此外,由于传统强化学习算法的目标是最大化长期奖励值,学习过程中的探索行为,可能会对病人造成致命影响。本文研究了基于强化学习的重症监护室(Intensive Care Unit,ICU)患者通断气时间和镇静剂使用剂量的最优决策问题。病人在ICU接受治疗时,往往伴随着有创通气和镇静剂的使用,而过早的拔管会导致二次插管,不利于恢复健康,而延长不必要的通气时间又会增加并发症的风险和高额的医疗费用。因此,合适的通气、拔管时间以及相伴随的镇定剂使用,对降低ICU病人死亡率至关重要。针对当前强化学习在医疗应用研究的主要问题,本文主要有以下贡献:(1)采用贝叶斯逆强化学习方法,从专家医师指导治疗的病例中,推测符合ICU通断气和镇静剂剂量医疗问题的奖励值函数,使学到的策略更加接近专家医师的策略。实验结果表明,贝叶斯逆强化学习算法,在收敛的稳定性和医生策略的匹配程度均优于简单给定奖励值函数的强化学习算法。(2)提出一种有监督的强化学习算法,结合了强化学习以长期目标为导向与监督学习最小化差异的特点,应用于ICU通断气和镇静剂剂量医疗问题,在以治愈病人的长期目标的同时,降低与真实医疗策略的差异化程度,提升治疗效果。实验结果表明,有监督的演员-评论家算法(Actor-Critic,AC)在与医师策略匹配程度上,略优于传统的AC算法,但在收敛速度,数据利用效率上远高于AC算法。
其他文献
为了调查新疆南疆地区绵羊牛无浆体病的流行情况,试验从南疆喀什、和田、阿克苏和巴州四个地区21个县市采集绵羊血液样品共637份。以巢式PCR扩增绵羊血液样品中牛无浆体的16S
11月16日,甘肃省庆阳市正宁县涉及幼儿群死群伤的重大道路交通事故给广西敲响了警钟。日前,广西自治区安委会发出紧急通知,要求采取五项措施加强中小学生和幼儿上下学交通安全管
列宁的物质定义明确地把客观实在性作为物质的唯一特征,作为物质概念的内涵。理解列宁的这一定义时,很早就提出了两个难点:
中华人民共和国成立以来,党和国家领导人从战略高度统筹考虑把教育纳入国民经济发展的五年计划,从而促进了当代中国教育事业的发展.回顾各五年计划和规划可知,教育发展离不开
利用贵州优势林业资源油茶的种植发展资料,介绍以油茶籽和废弃茶籽饼为主要原料,提取绿色环保型农药高纯茶皂素的工艺原理及应用。
静电是油品在储存和运输过程中的危险因素。在轻质油品中加入抗静电剂,能有效提高油品电导率,减少静电事故的发生。文章重点考察了石脑油、汽、柴油3种油品对4种抗静电剂的感
综述了边缘无浆体病的常规病原学诊断方法、血清学诊断方法和分子生物学检测方法的国内外研究现状和发展水平,并探讨了核酸探针、PCR和反向线状印迹杂交技术在边缘无浆体病诊
目的:探讨天麻在《太平惠民和剂局方》(以下简称《局方》)中的配伍应用。方法:通过系统收集《局方》中40首含有天麻的方剂,以主治归纳天麻在方中的功效,确定其配伍药物。结果:天麻
影片《小鸡快跑》是一部以母鸡为主人公的黏土动画喜剧,讲述了这群母鸡在Ginger的带领下,经过无数次失败与努力,终于获得自由的故事。本文试从女性主义文学批评理论角度出发,
作者认为《伤逝》不是传记,而是一篇独立存在的小说,“作品中的涓生在爱情和婚姻生活方面,经历了一个由肯定到否定,并决心‘向着新的生活跨进第一步去”的感情变迁的历程。应