基于虚拟现实的远程双目视觉系统设计

来源 :浙江理工大学 | 被引量 : 0次 | 上传用户:a364444252
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来虚拟现实技术日益发展,在公共安全和游戏娱乐等领域随处可见。虚拟现实的实现是通过多种技术来将虚拟与现实融合在一起,增加用户在视、听、嗅、触觉等感官的仿真感受。其中作为虚拟世界与现实世界的第一传感通道是视觉通道,这离不开立体显示技术,通过此技术,为虚拟系统提供视觉信息的数据源,使用户感觉到明显的立体视觉效果。但是虚拟现实系统的立体显示技术需要依靠一定的高精度设备及复杂的计算机处理过程,成像技术难度大且设备花费的成本也高。而人的大脑具有自动合成立体图像的功能,大脑可以综合左、右眼视图生成立体图像,产生深度感知。本文依据人的双目视觉原理,提出了基于虚拟现实的远程双目视觉系统设计方案。采用双目相机模拟人眼获取图像,将获取的视频图像经过处理后,通过流媒体服务器转发到远程客户端,放在手机盒子中观看,使左右眼观看到具有偏差的两幅图像,通过大脑融合左右眼图像,生成立体图像,该设计方法相比较于目前流行的视频播放技术,实现了远程观看现场视频的效果和逼真的沉浸感。将双目视觉系统按照服务器端和客户端来进行搭建,具体为:(1)服务器端主要由双目相机和机器人控制器来构建,两者之间通过USB进行连接。具体服务器端的设计可分为视频图像采集模块、视频图像校正模块、视频图像编码模块和流媒体服务模块。首先,对双目相机采集的图像进行实时校正处理,减少双目相机因垂直视差对大脑合成立体图像的影响,增强了立体成像效果,将校正后的左右图像合成为一张图像进行传输,保持了双目同步性。采用H.264编码技术压缩视频,以及对Live555平台进行二次开发,实时转发H.264数据流,达到了客户端与服务器端的的实时性。(2)客户端为安卓手机播放器,主要设计可分为视频图像解码模块和渲染显示模块。采用FFMPEG技术对接收到的码流数据进行解码,然后采用Open GL技术渲染显示,在解码与渲染显示之间设置多线程,通过队列进行缓存通信的方式,实现了边解码边绘制,同时将解码后的视频帧由YUV格式转换到RGB格式是通过Open GL来实现的,提高了绘制速度。实验结果表明,本文设计的系统校正效果良好,在安卓客户端观看远程场景,沉浸感强,保证了实时性。
其他文献
为适应信息化社会发展的需要,将传统建筑技术、现代通信技术、计算机网络技术和自动控制技术等各种先进科学技术相互融合、合理集成为最优化的整体现代化新型智能建筑。设计
自适应放射治疗(Adaptive radiation therapy,ART)作为一种闭循环反馈的放疗流程,通过在放疗过程中采集患者影像(如CT、核磁成像等)来评判患者解剖(如肿瘤退缩、体重减轻或器
活化的过硫酸盐氧化,作为一种新兴的高级氧化技术,是一种矿化难降解有毒污染物的有效方法。在众多的活化方法中,过硫酸盐通过接受电子完成的电化学活化,具有容易操控和环境友
随着大型全可动高精度反射面天线向着高频段、高增益、大宽带、高指向精度的方向发展,对天线结(机)构设计挑战巨大。例如国家重点基础研究发展(973)计划“110米大口径全可动
1.问题的提出目前,我国的家庭教育对青少年的社会适应问题往往无能为力,仅仅限于养而忽于教。而学校教育则把主要的精力用于发展青少年的智力,提高学习成绩以应付升学考试上,
柴达木盆地是国家循环经济试验区的重要产业布局区,规划建设大柴旦循环经济工业园区。塔塔凌河是该地区最大的河流,为大柴旦地区提供了水资源保障。区内的地下水的开发利用目前主要集中在塔塔凌河冲洪积平原。自2003年该地段开展水源地勘查评价以来,已建成3处地下水水源地供水。但塔塔凌河作为该地区的供水基地,以往的调查和研究工作对地表水和地下水的相互转化,以及循环模式的研究相对不足。另外,与西北内陆盆地诸多流域
生鲜电商配送中心选址-路径优化是一个复杂的系统优化问题。本文针对我国生鲜电商遇到的冷链费用高、生鲜损耗率大、能源消耗大等问题,对配送中心进行优化选址和对配送路径进
台湾虽然在地理位置上与大陆相离,但共同的传统中华文化文明一脉相承。纵观我国大陆百余年来学校音乐教育的历史,从20世纪初的“学堂乐歌”运动,一直到改革开放后借鉴德奥音乐教育模式、从直接照搬苏联专业音乐教育体制到上世纪末以来全面引入、学习、运用西方现代作曲技法,清晰地展示出了“西乐东渐”的发展脉络。尽管在此期间,我们有过革命民族音乐运动、提倡学习民间音乐等举措,但传统音乐文化仍然不够重视,已然成为公众
据统计,在各类交通事故中以全正面碰撞和偏置碰撞发生的概率较高,儿童乘员作为道路交通事故中的弱势群体,其乘车安全性已引起人们的重视。我国关于儿童乘车安全的研究起步较
本文以甲基丙烯酸甲酯(MMA)、丙烯酸正丁酯(BA)、丙烯酸(AA)为共聚单体,铝溶胶为改性剂,采用半连续种子乳液聚合法制备铝溶胶改性的聚丙烯酸酯乳液。主要通过傅里叶变换红外