过去十几年中,虚拟现实(Virtual Reality,VR)系统得到比较广泛的应用,但是由于虚拟场景全部由计算机生成,所以大多数VR系统表达的真实场景不够丰富。增强现实(Augmented Reality)技术与增强虚境(Augmented Virtuality)技术应运而生,其目标是能够同时处理虚拟的合成世界和真实的物理世界,把两者无痕地结合起来。增强现实与增强虚境技术在医学、军事、工业、娱乐以及日常生活中都具有非常广阔的应用前景,尤其是随着近年来以手机为代表的移动技术不断发展完善,很多设备都配备了无线网络、摄像头、全球定位系统以及诸如惯性或磁性等传感器装置,这为AR和AV的研究与应用提供了良好的平台,因此移动增强现实与增强虚境的应用会越来越多,这也成为了目前的研究热点之一。本文正是以AR,AV为框架,整理了以往的研究内容和方法,并对其中所涉及的跟踪、交互、显示等关键技术在个人电脑与智能手机上分别进行了研究。本文首先概述了增强现实与增强虚境的概念、特征及其应用领域,对国际上的研究现状及成果进行了跟踪和分析。然后,本文介绍了增强现实与增强虚境中涉及的跟踪、交互、显示等技术,在个人电脑上对基于标志跟踪的增强现实相关算法如遮挡问题以及顶点扰动等问题进行了研究并在PC上实现了相关系统,然后我们讨论了移动增强现实与增强虚境的特性以及优缺点等方面内容,并分别在Windows Mobile、Google Android系统上开发了相应的增强现实与增强虚境演示系统与应用程序,并对实验结果进行了分析与总结。本文的创新点在于:1.改进了基于视觉的标志跟踪过程中的传统定位注册方法,增加了遮挡处理算法,使标志识别不易受干扰,鲁棒性更强,利用直线拟合算法减少顶点扰动的方法增加了标志框定位的准确性;2.在Windows Mobile平台上实现了增强现实类库并进行了优化,达到了较好的实时效果;3.对Google Android平台上的传感器及网络等特性进行了研究,实现了基于网络的视觉与传感器混合跟踪系统以及基于动作捕捉和基于磁性传感器的增强虚境应用。