一种基于人类行为模式的人机物体传递系统

来源 :大连理工大学 | 被引量 : 1次 | 上传用户:zxing515
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人工智能技术的发展,以人为中心的非受限人机交互方式成为研究的热点,让机器人能够以人类的行为模式进行运作正逐渐成为人机交互技术发展的新方向。本文从人机交互中的基本任务之一——人机物体传递着手,提出了一种基于人类行为模式的人机物体传递系统。本文主要从以下方面展开研究:首先,结合RGB-D图像和人体骨骼关节点信息,提出一种人类物体传递意图识别方法。从RealSense D415相机获取彩色与深度图像并对齐,并通过OpenPose骨骼识别方法结合深度图像映射实时获取人体三维骨骼关节点;采用基于中心关节点的特征表示方法来描述上肢姿态,并使用支持向量机进行姿态实时分类;通过区域生长法结合HSV颜色阈值分割进行手持物体存在检测,并与姿态检测结果结合实现对人类物体传递意图的实时识别。其次,提出一种三维空间下基于人体舒适度模型的物体传接点预测方法。构建人体手臂模型,求解手臂正逆运动学及工作空间;在此基础上构建融合手臂关节扭矩模型和中间关节角度模型的二元舒适度模型,将传接点预测问题转换为舒适度优化问题,实现对人-人物体传接位置的预测,并开展人-人物体传接点验证实验,验证该模型的可行性和准确性;将该模型用于人机物体传递过程中,根据骨骼关节信息估算人体身高等参数,确定传接点预测模型输入参数,实现对人机物体传递过程中物体传接点的实时解算。然后,搭建机器人平台及人机物体传递系统。介绍机器人平台的本体硬件和传感器硬件参数,构建接口层API程序实现对机器人本体硬件的控制,并在接口层上编写ROS(Robot Operating System)驱动,整合机器人本体硬件和各部分传感器,为机器人构建完整的ROS层生态,将机器人上下层控制解耦,提高系统稳定性;基于人类行为模式过程设计人机物体传递系统控制逻辑,搭建人机物体传递系统框架并整合各关键模块,从硬件到软件,搭建一套人机物体传递系统实验平台。最后,开展人机物体传递系统各部分及整体实验。建立传递姿态识别数据集,通过支持向量机进行传递意图分类训练,并使用交叉验证进行超参数优化,获得99.6%的姿态识别准确率;对手持物体存在检测参数进行优化,实现97.3%的手持物体存在识别准确率;开展人机物体传递整体实验,让多个使用者体验该物体传递系统并进行RoSAS评价,证明本文提出的基于人类行为模型的人机物体传递系统能够有效降低传递时间,给使用者带来更加自然、流畅的传递体验。
其他文献
抠图技术广泛应用于图像合成、电影制作、虚拟现实、网络直播、个人视频制作、平面与网页制作,由于场景越来越复杂,传统蓝屏抠图方法已经不再适用,自然图像抠图问题的研究获
随着制药行业的飞速发展,制药产生的环境污染也日益严重。目前,用于评价药厂环境中污染物毒性的检测方法已有很多,但评价药厂环境中污染物的体内综合毒性及体内累积毒性的低
T钢铁公司混合所有制改革工作已经步入正轨,随着国家供给侧改革持续深入,钢铁行业供给侧改革重心将逐步转移到“去杠杆”和提高产业集中度上。实施混合所有制改革后的T钢铁公
随着网络规模的不断扩大,传统网络中运维效率低下、策略部署复杂、设备繁多等瓶颈日益凸显。软件定义网络(Software-defined Networking,SDN)为传统网络的变革提供了新思路。
近年来,随着经济高速发展,商品流动速度不断加快,许多企业每天都有大量商品需要物流运输。这些货品的称重、销售关系到企业的经济效益,如何快速、准确、有序并低成本地进行称
粲偶素是由一对正反粲夸克通过强相互作用组成的束缚态。1974年,实验上观测到了第一个粲偶素家族的粒子J/Ψ,紧接着一系列的粲偶素成员相继被实验发现。这些丰富的实验信息为
文本情感分析(Text Sentiment Analysis),也称为观点挖掘(Opinion Mining),是对文本中的主观信息(比如观点、情感等)进行分析与挖掘的一项研究,它主要包括三个阶段的子任务:
改革开放后,我国经济高速发展,对外贸易水平显著提高。习近平总书记提出的“一带一路”倡议又将中国和世界紧密的联系到了一起。港口是对外开放的关键节点和交流纽带,同时又
随着现代工业化水平的迅速发展,工业设备及系统复杂度和自动化程度不断提高。如何提高系统的安全性和可靠性,减少生产过程中的财产损失和人员伤亡,成为现代工业系统中的重大
包钢白云鄂博西矿年产原矿1000万t,采剥总量7500万t/a,是特大型露天采场。采场开采阶段高度12m,台阶坡面角65°。目前采用预裂控制爆破技术靠帮,随着采矿工程的推进,预裂爆破靠帮体现出了局限性,主要表现为:临近地表区岩性软弱易风化区域采用预裂靠帮之后,没有保留很好的设计边坡外形和合格的坡面半壁孔率;平台宽度不足的区域不适用于预裂爆破。解决上述区域的靠帮问题,对采场边坡稳定、安全生产具有重要