游戏人工智能中寻路与行为决策技术研究

来源 :武汉理工大学 | 被引量 : 5次 | 上传用户:gloria_yan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
游戏人工智能系统是游戏软件中的重要组成部分,其应用旨在帮助游戏中的虚拟角色不断适应游戏环境的变化,产生对玩家来说足够合理的行为反应,使虚拟角色更加智能。游戏人工智能系统从架构上可以分为感知系统、行动系统以及决策系统等主要部分,其中行动系统是基本模块,决策系统是核心模块,它们决定了游戏人工智能的水平,进而影响游戏玩家体验。为了提高游戏人工智能在游戏软件中的使用效率及稳定性,本文主要研究游戏人工智能中的寻路技术及行为决策技术。针对游戏中寻路算法效率低的问题,研究如何加快寻路算法的速度并改进算法的适用性。为使游戏角色的行为决策能适应游戏环境变化,在行为树中引入强化学习算法,并研究如何改进强化学习算法,获取其在行为树中的稳定控制策略以及提高强化学习算法在行为树中控制效率。本文的主要研究工作体现在以下三个方面:(1)针对A*算法在游戏寻路中效率低的问题,提出了一种基于路径复用的A*寻路算法。首先根据游戏寻路的特点,改进算法的启发函数,减少算法对无用节点的探索,使寻路朝着正确的方向进行。然后通过设置锚点,利用路径复用的思想进一步减少寻路过程中的节点探索及算法的资源消耗,从而提高算法的寻路速度。其次通过为动态物体设置移动优先级缓解A*算法不适用于动态寻路的问题。最后通过寻路实验对比,验证了改进的寻路算法提高了A*算法在游戏寻路中的效率。(2)针对行为树决策编码复杂且缺乏学习机制的问题,首先将强化学习的思想运用到行为树设计中,使行为树根据游戏环境变化调整其结构以适应环境。然后分析了强化学习在行为树中控制不稳定及学习效率低的问题,提出了一种稳定型强化学习算法,改进强化学习算法的状态值更新方式及奖赏函数,并利用状态值递增准则和动作连续性准则去除不利于算法收敛的动作,以提高算法的控制精度,使算法获得稳定控制策略。最后通过行为树实验对比,验证了稳定型强化学习算法在行为树中能获得稳定控制策略,并在一定程度上提高算法的学习效率。(3)针对强化学习在行为树中学习效率低的问题,提出了一种基于定性动作的Option算法。首先从分时的角度分析了强化学习探索策略效率低的原因。然后通过定义定性动作与次优定性动作判断准则,实现分步探索策略;利用层次化的思想分层学习行为树系统的次优策略与最优策略,缓解行为树系统最终优化程度与算法学习速度之间的矛盾,在保证算法控制精度的同时提高算法的收敛速度。最后通过行为树实验对比,验证了基于定性动作的Option算法在行为树中能较快收敛,并获得稳定的控制效果,提高了强化学习算法在行为树中控制效率。
其他文献
该文合成了三种含有不同钒原子数的Keggin型磷钼钒杂多酸(H3+xPMo12-xVxO40,x=1,2,3),并用不同铵盐修饰得到了一系列杂多酸铵盐,通过FT-IR、XRD和循环伏安法等表征手段对合成的催
本文浅析名词在藏汉英三语中翻译时的译法,翻译具备的条件等。全文分为藏英汉三语中关于翻译的解释、藏英汉三语名词的认知和分类、藏英汉三语名词译法等三个部分。阐明了三
论文对海南旅游产业发展的现状进行分析,指出市场竞争机制制度演化路径是影响海南旅游产业发展的主要路径,公共财政资金注入,能改变市场演化路径,加快产业调整步伐,达到快速
现如今,人们物质生活日益富足,对于自身合法权益给予了高度重视。其中隐私权是一项重要的人格权,但现行法律制度中,并未给予明确的规定,特别是未成年人的隐私权极易被侵犯,无
2016年年初,干散货航运企业Golden Ocean Group首席执行官Herman Billung表示,航运业处在自维京时代(Viking age,即8至11世纪的北欧海盗时代)以来的最糟糕时期。而这个最糟糕的
期权性质的交易早已有之,而期权理论却是在近半个世纪才得到了极大发展。Black-Scholes期权定价模型的提出,奠定了期权定价理论发展的基础。期权的思想从此不仅在金融领域得到
离心泵的扬程是随流量变化的,可以在不同工况下工作。还有一些特殊离心泵不仅要满足设计工况下的扬程-流量要求,而且还要严格满足在非设计工况下的几个特殊工况点的扬程-流量要求。目前离心泵多工况的设计已成为一个研究热点,较准确地预测离心泵多个工况点的性能,对于离心泵多工况设计研究具有很重要的意义。目前对离心泵设计工况点性能的预测研究较多,预测结果也比较准确,而对离心泵非设计工况点性能预测的研究较少,预测精
教育发生是指真实的教育实践活动持续展开的过程,其实践秉性可以概括为非对象性。这种非对象性主要表现在三个方面:从教育目标上说,教育发生中并没有一个固定的理论目标作为
航运业与外部以及内部的关系出现了不和谐,才导致航运市场在如此长的时间内始终没有起色。重新构建新型的适合当前经济发展的和谐生态是我们需要解决的问题。
随着社会和人类自我认知的发展,构建无障碍的生存环境、社会环境逐渐成为全人类的共同诉求。经过多年发展,我国的无障碍环境建设水平有了大幅提高,但与起步较早、实践水平较