面向智能车的行人过街意图识别

来源 :重庆理工大学 | 被引量 : 0次 | 上传用户:whxust
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在城市交通场景中,理解行人的行为和意图仍然是自动驾驶车辆的主要挑战之一。为解决城市交通中自动驾驶车辆对行人的过街意图识别问题,本文对行人过街意图识别展开研究,并基于Apollo线控底盘进行感知意图的决策控制模拟实验。首先,提出了骨架图表示方法和图卷积特征提取方法。本文利用行人的骨架数据识别行人的过街意图,行人的骨架数据可以表示为向量序列和二维网格,这样的数据不能完全表示骨架数据的结构。本文提出将行人的骨架数据表示为时空骨架图,可以更深层次表示骨架信息的特征,骨架图为非欧式结构,传统卷积神经网络不能提取非欧式结构图特征,故提出采用图卷积神经网络提取行人的骨架图特征。然后,进行了行人过街意图识别的数据集的制作。深度学习能学习到数据的特征,进而对数据进行识别分类,依赖于带有标签的数据集。本文在JAAD公开数据集中提取了训练行人过街意图网络需要的过街状态(过街或者不过街)数据集标签,然后利用Openpose提取行人的骨架关节点坐标数据,最后将行人骨架关节点数据和过街状态标签制作成TXT文件格式的行人过街意图识别数据集。其次,提出了双流自适应图卷积神经网络的行人过街意图识别方法,并利用数据集对其训练与实验分析。针对时空图卷积网络存在注意力机制灵活性不足,不能捕捉非相邻关节点的依赖关系,设计了自适应图卷积网络结构,在自适应图卷积层中将掩码矩阵改进为原始邻接矩阵、可训练邻接矩阵和数据相关图的相加。为了更加充分利用骨架信息,设计关节点数据和骨骼数据作为双流数据,分别输入到自适应图卷积网络中,采用Softmax融合两个网络分数识别行人的过街意图。利用制作的数据集训练与测试模型,结果表明自适应图卷积能捕捉到非相邻关节点之间存在依赖关系,模型识别准确率为89.36%,优化后的网络使得模型准确率提升3.36%。最后,完成了基于行人过街意图的决策控制模拟实验。本文神经网络的构建与训练都在PC端进行,根据Apollo工控机硬件条件和模型环境,在Apollo工控机部署感知模型。感知、决策、控制以及车辆执行四个模块之间有数据的传输,设计智能车的决策控制模块,并利用ROS通讯和CAN通讯实现数据传输。部署后的感知模型能准确识别行人的过街意图,单帧推理时间为258)到308),基本达到实时性的要求,并验证智能车可以根据行人的过街意图信息,发送CAN报文给线控底盘,自主控制车辆避让行人。
其他文献
书法艺术通过点线的灵活组合,形成了别具特色的艺术表达形式,对人们的审美心理产生了重要影响。书法艺术借助有形线条创造出了突破时空约束的艺术作品,以其独特的意境,给人们带来了精神层面的愉悦感。书法意境是书法灵魂的体现,王羲之的书法能够历经千年久传不衰,受到人们的广泛青睐,在很大程度上取决于其书法蕴含的意境美。
期刊
为研究江汉平原—大别山区过渡带黏性层状土中溶质迁移的规律,以保守性阴离子Br-为示踪剂,通过等温吸附试验、一维弥散试验、HYDRUS-1D软件模拟反演手段,研究了Br-在黏性层状土中的吸附参数、迁移规律,模拟反演其弥散参数。结果表明:(1)Freundlich模型和Langmuir模型均能较好的拟合吸附试验结果,随着土壤中黏粒比例的增大,土壤对Br-的饱和吸附量有所增加;(2)层状土中土壤质地与结
期刊
车辆主动避撞行人系统作为车辆主动安全技术的重要组成部分,一直是先进辅助驾驶系统的研究热点之一。行人作为城市交通参与者中的重要一员,如何使车辆自主安全的避让行人,是车辆主动避撞行人系统急需解决的难题之一。本文提出一种基于车载相机感知前方道路行人,集纵、横向主动避撞控制于一体的主动避撞行人系统。重点针对人车碰撞风险评估与避撞方式决策、横向主动避撞路径规划与控制、纵横向主动避撞控制和典型工况模拟仿真进行
学位
目的 探讨复方利多卡因乳膏复合羟考酮预防经尿道膀胱肿瘤电切术(transurethral resection of bladder tumor,TURBT)后导尿管相关膀胱不适(catheter-related bladder discomfort, CRBD)的有效性。方法 选择2020年7月至12月全身麻醉下行TURBT的男性患者135例,随机分为3组:复方利多卡因乳膏组(L组)、羟考酮组(O
期刊
电影是一种蕴含着丰富模态资源的多模态叙事文本,决定了电影转喻的多模态特征。电影转喻是影片利用多模态符号资源将自我陈述的世界组织成想象共同体的基本方法。中国撤侨题材主流电影的共同体想象建构包括指涉转喻层和意义转喻层两个层次,即以指涉转喻实现身份建构为基础,以意义转喻实现概念认知和情感认同为关键。《万里归途》通过基于角色-中国外交官-中国政府的多层转喻,实现由中国外交官的品质特征抵达同一理想化认知模型
期刊
智能驾驶与新能源是当下汽车产业发展的两大新技术,但是不管车辆变得多智能,亦或是多节能,其机械素质永远是评判一辆车等级的重要标准。在车辆研发的初期,实现整车的NVH性能试验是基本不可能的,而采用虚拟仿真手段可以实现车辆在研发前期的振动噪声预测与诊断,大大缩短研发周期,降低成本。但由于底盘中存在橡胶衬套这类非线性隔振元件,而车辆虚拟传递路径分析是基于线性系统来实现的,这就导致获取的振动与噪声响应及其对
学位
质子交换膜燃料电池作为一种能源转化装置,具有能量转换效率高、零排放、噪音低、拓展性高等优点,是我国能源技术创新的研究重点。但质子交换膜燃料电池(PEMFC)内部反应物分布不均、质子交换膜脱水、水淹等问题都阻碍了质子交换膜燃料电池的大规模应用。为了解决上述问题,本文对多通路蛇形流道双极板质子交换膜燃料电池内外加湿与双路供氢策略,通过实验与数值仿真从燃料电池输出性能和流道内反应物、膜水含量、电流密度分
学位
镀锌钢板具有良好的耐腐蚀性和冲压成形性,在机电、家居、汽车等行业的应用广泛,是生产微电机外壳的主要原材料。在微电机外壳多道次拉深成形过程中,镀锌层与模具表面反复的接触、受压、摩擦,可能导致镀层发生划痕、剥落等表面损伤,影响镀锌层的防腐蚀功能。本文针对镀锌钢板在多道次拉深成形中的损伤问题,以微电机外壳为研究对象,通过理论研究、仿真模拟、物理试验、生产试验,重点研究镀锌钢板在拉深成形中的损伤机理、拉深
学位
随着我国加速深入实施智能制造战略,制造业不断朝着智能化、网络化、柔性化发展。运动控制系统作为工业装备的核心,须在满足自动化设备控制器开放性、高性能要求的同时符合现代制造智能化、系统化、网络化变革的需求。本文以全软件的理念开发设计了一款面向服务架构的开放式运动控制系统,通过层次化模块化的思想构建了与具体设备解耦,通用可拓展的开放式运动控制核心,同时基于SOA的思想以PLCopen运动控制标准为基础提
学位
某公司现有焚烧2000t/日污泥(80%含水率)设计能力循环流化床锅炉1台,但污泥干化车间因设备老化严重,只能处理650t/日污泥(80%含水率),现阶段存在干泥不足的情况,经了解,某环保公司现具备污泥深度脱水工程化应用技术,可将含水率80%左右的污泥经深度脱水后降低到50%左右。为更好地解决某公司污泥处置能力不足的问题,本文介绍两家公司合作进行污泥深度脱水试烧,探索污泥脱水—焚烧技术路线,提高污
期刊