基于双目视觉的行人检测算法研究及其FPGA实现

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:windsway
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
对三维环境的实时感知与识别是机器人研究领域的关键技术。而对行人的检测与三维位置感知技术,可以帮助机器人更好、更安全的服务人类,具有很大的研究价值。相比其它深度传感器,双目视觉系统具有价格低、体积小、功耗低等优势,适合移动机器人的应用场景。但基于双目视觉系统的行人检测算法计算量巨大,难以满足移动机器人对实时性的要求。针对移动机器人对于行人三维位置感知与检测的实际需求,本文搭建了一个基于Xilinx Zynq-7000平台的双目行人检测系统。对行人的三维位置感知与检测技术主要包括:三维环境信息获取与行人检测两部分。相应地,本文主要研究了双目视差计算与行人检测算法在FPGA上的实现。双目视差计算模块通过立体匹配算法获取环境的视差信息,可以给行人检测模块带来很大的帮助。其中匹配信息可用于验证行人检测结果,提高检测正确率。视差信息可以实现缩小行人搜索区域、环境多目标分割、行人三维定位等功能,这对于构建功能更为强大的行人检测系统具有重要意义。双目视差计算模块包括:视频同步采集、双目立体校正、Census特征向量提取、SGM算法和视差优化等子模块组成。针对立体匹配算法在搜索时存在计算量大的问题,本文对双目视觉系统进行了立体校正处理,从而将搜索区域从二维降到一维。由于8方向路径聚合算法存在数据流与计算流方向相反的问题,本文选用了3方向路径聚合算法。针对3方向路径聚合后的视差图,存在条纹与误匹配现象。本文使用左右一致性检验与中值滤波算法对视差进行了优化。行人检测模块选用了方向梯度直方图作为行人特征,采用线性支持向量机对行人进行二分类。其中分类所需的特征向量是通过FPGA实时提取出来的,所需的分类系数与分类阈值是在PC端使用libsvm工具箱训练得到的。针对方向梯度直方图向量归一化流程过长的问题,本文将SVM分类器内嵌到了特征向量计算模块。试验表明,本文搭建的基于双目视觉的行人检测系统性能良好。在保持较高精度的同时,能够满足移动机器人等场景对于实时性的要求。其中双目视差计算模块在帧率为60 fps的系统中能正常工作,行人检测模块最大速率可达到314 fps。本文在FPGA实现的双目视差计算算法与行人检测算法可作为视觉加速模块,对于高速移动机器人环境感知功能的产品化有一定帮助。
其他文献
背景与目的白细胞介素15受体阿尔法(Interleukin 15 Receptor alpha,IL-15Rα)是白细胞介素15(Interleukin 15,IL-15)的特异性受体,IL-15与细胞表面的IL-15Rα结合形成IL-15/IL-15Rα复合物后与白细胞介素2受体贝塔(Interleukin 2 Receptor bita,IL-2Rβ)以及白细胞介素2受体伽马(Interleu
随着科技发展,移动数字新媒体席卷而来,“掌中宝”时代已经到来。当前,校园中,我们随处可以见到“手机控”、“低头族”,学生们不合理地使用手机很容易被手机支配从而成为手
完善的公司治理结构可以有效约束经理层的盈余管理行为,但是不同的治理机制对盈余管理影响的方向及程度不尽相同。文章以2000—2009年沪深A股上市公司为样本,基于公司外部治
<正>有人说:退休一身轻。但我退休后却落下"一身病"。听朋友说跳舞能健身,我抱着试试看的心情来到山东章丘老年大学舞蹈班。舞蹈老师杨莲玉身材苗条,气质高雅,都以为她不过四
期刊
分析了43例中、晚期卵巢癌手术后腹腔化疗配合中药治疗的疗效,认为腹腔化疗对腹水的清除、肿瘤标志物的下降、提高生存率有显效。化疗后配合中药治疗对调整机体功能、减轻化疗毒
特色专业建设是当前高校人才培养的重要载体,是克服人才培养同质化倾向的有效途径,是深化教学改革、全面提高教学质量的重要内容。文章在系统地研究地方本科院校特色专业建设
基于社会经济的发展,人们对生活质量的要求也越来越高,特别是针对住户环境的要求,为适应社会的大趋势的发展,现代高层建筑楼宇中加入了电气自动化系统,以此保证建筑的安全性
构建EML指数模型,引入系统广义矩估计,探究境外投资对中国上市银行发展质量的影响。研究显示,我国上市银行全要素生产率平均每年增长4.27%,发展质量不断得以改善;技术进步对
<正> 月经虽属正常的生理现象,但由于经期阴道不断流血,身体气血相对虚弱,抵抗力较差,易受外界和内在不良因素的影响,如不注意经期卫生,便会引起月经病或其它妇科疾病 经期保
<正>在山东淄博市老年大学,舞蹈班的周勇堪称模范学员:同学们夸她负责任,老师赞她跳得美。周勇曾在很多舞蹈中担任领舞,这不仅因为她的舞姿优美、舒展流畅,
期刊