从2013年以后,虚拟现实在全世界范围异军突起。各大游戏公司、互联网巨头都或多或少的致力于虚拟现实的发展。其中最具代表性的就是Facebook 20亿美金收购了虚拟现实公司Oculus VR。国内的盛大网络也强势收购了一家美国VR公司,暴风影音与乐视影音也将自己的虚拟现实设备推向了市场。谷歌也在不断的强化街景服务,并提出了三维立体街景概念。本文主要研究方向是基于鱼眼图像的虚拟现实生成技术。主要从以下方面展开研究工作。(1)鱼眼摄像机标定与鱼眼图像的矫正本文使用张正友标定与全向摄像机标定两种不同的标定方法对鱼眼摄像机进行相机标定。针对张氏标定与全向摄像机标定的不足之处提出一种基于等距投影模型的鱼眼摄像机棋盘格标定方法。在鱼眼图像的畸变矫正算法上,本文实现了三种矫正方法,一是基于透视投影模型;二是基于球极平面射影模型;三是基于图像的内容。(2)基于鱼眼图像的虚拟现实生成技术本文对虚拟现实的成像设备与观看设备进行深入研究与分析之后,认为基于图像的虚拟现实生成技术中的关键点为球面全景图拼接算法。球面全景图拼接技术主要包括图像预处理、图像特征点的提取与匹配点对的生成、球面全景图像定位与捆绑调整、图像曝光优化、全景图的输出与显示。在进行图像定位时,经过对成像设备与实验结果的分析,本文将摄像机之间的平移运动忽略。最后,本文实现了上述所有算法,完成了全向图的生成。(3)基于360度全向图的360度全景辅助驾驶系统本文使用两种不同的方式进行车载环境的硬件平台搭建,一是使用传统360度全景相机;二是利用将多个车载专用摄像机加装到真实的车身上。将基于鱼眼图像的虚拟现实技术应用到车载系统中,设计并开发了基于鱼眼摄像机的360度全景环视辅助驾驶系统。不同于鸟瞰俯视系统之处在于,该系统可以实现车身四周360度全景的任意角度查看,而不仅仅俯视。车辆上加装的多个鱼眼摄像机实时的将车体四周场景输入到该系统中,该系统对多路多媒体数据流进行处理后快速生成全向图,最终,用一种人机交互的方式将3D场景展示给驾驶员,使得驾驶员可以自由的查看车身四周360度任意角度的场景。