机器人演示编程的示教动作识别与定位方法研究

来源 :西安建筑科技大学 | 被引量 : 0次 | 上传用户:conanjunn
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着工业机器人在工业生产中的大量应用,其工作方向已从基本的机械加工和简单协助技术人员,演变成了基于人机交互作用完成不同环境下的复杂任务,机器人编程技术已成研究热点。论文以机器人演示编程为研究对象,针对传统演示方式编程部署时间长、人机交互能力差和使用门槛高等问题,以轨迹示教任务为例,研究基于手势识别轨迹生成方法改进及应用,结合工业机器人和视觉传感器,实现机器人与操作人员的自然交互、快速示教目的。在手势识别方面,首先分别针对演示编程技术与基于手势识别的人机交互技术进行了国内外研究调研,结合机器人的实际应用场景进行设备选择,建立整体组织框架;其次提出了基于肤色分割与CNN结合的手势识别方法,通过利用肤色模型提取手势相关信息,将手势图片输入RGB与YCbC混合肤色空间去除非肤色区域,再将分割得到图像进行腐蚀处理、扩张处理和高斯滤波以平滑噪音,以突出轮廓和边缘,最后进行二值化得到手势图像;利用Keras自建CNN模型进行特征提取并得到手势识别模型;在Marcel数据集上进行验证实验,并且针对开源手势样本,较少的情况,自行采集图像构建手势样本库进行训练与测试,通过实验验证该方法的可靠性,可用于进行人机交互。在目标跟踪方面,研究了基于3D信息的目标跟踪,将点云算法应用于机器人轨迹生成,采用颜色识别的方法分割出示教器上的颜色标记,并利用Euclidean算法完成目标点云聚类,最后采用RANSAC算法进行点云拟合,达到对目标颜色标记的跟踪,通过实验验证该方法对实际工作环境中的颜色标记跟踪稳定可靠,可以用于轨迹生成。以UR5机器人为研究对象,对其进行位置描述与姿态描述,以确定颜色标记在空间中的位置与姿态信息,通过齐次变换矩阵将相机坐标系下颜色标记的位姿转换到机器人坐标系中,基于目标跟踪方法引导机器人末端完成轨迹生成;最后基于ROS(Robot Operation System)完成机器人示教编程框架的建立,通过设计用于手势识别、用于读取UR机器人当前关节角度、用于处理接收到的手势消息以及在任务演示和执行之间切换阶段和用于向机器人控制器发送关节角度以移动机器人的四个主要节点,将前三章算法应用于该框架,完成基于手势识别的轨迹生成方法;利用QT完成人机交互界面的设计,采用该平台的信号与槽(signals and slots)机制完成开发,并以UR5机器人为对象进行了人机交互实验。
其他文献
随着工业的发展,环境污染和能源枯竭问题显得日益严重,大量的有机污染物,如苯并咪唑类和酚类污染物等已经严重的威胁到人类的健康。因此,其简便、快速的监测方法尤为重要。在
在人类从事航天活动以来,已经发射了大量的航天器。许多航天器在科研任务中发生损坏或者完成了任务后不能及时回收,会以空间碎片的形态绕地球高速转动。在各种空间碎片移除方
目前,复杂异形拼焊型管路生产时需要专用的装焊工装。随着航天设备新型号新产品的迅猛发展,所研制生产的工装模具越来越多,越来越大。无论专用工装的设计制造周期还是大量专
高精度的水下机器人(Autonomous Underwater Vehicle,简称AUV)在管道检测、搜救以及回收对接等方面发挥着越来越重要的作用。抗海流干扰能力是衡量AUV航行性能的重要指标之一
建立合理的建筑在室人数预测模型对提高建筑设备系统运行控制和降低建筑能耗具有重要意义。现有研究在对在室人数进行预测方面主要采用的是隐马尔可夫方法,通过特征选择确定
目的探索数字化技术在个性化、精确化额瓣修复全鼻缺损中应用的可能性。方法运用研究中心基础人脸数据库对全鼻缺损患者病例进行个性化检索,配准,评价相似性,将相似度较高患
传统的声化学反应器中容易产生驻波声场,不利于提高处理的效率。常用来消除声化学反应器中驻波声场的方法多是从声波的辐射方式上来改变反应器中的声场分布,但多应用于小型声
近年来,破产理论受到越来越多的关注.研究破产理论有利于保险公司对未来做出预测,及时规避风险,具有重要的现实意义.无数专家学者在Lundberg-Cramer经典破产理论的基础上进行
近年来,人们通过各种旅游类搜索网站即可以完成机票的搜索和预订。用户选择出发城市,到达城市和出行日期,并点击搜索后,进入航班行程结果页面,用户可在该页面选择适合自身要
在高速铁路技术快速发展与能源枯竭问题日益严重的今天,将新能源如太阳能运用在高速铁路中有着非常重要的意义。在太阳能各种形式的利用中,光伏发电技术是重点研究的方向。高