基于机器人视觉的钢板件检测、位姿估计与抓取

来源 :广东工业大学 | 被引量 : 1次 | 上传用户:allenhuqiqi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维物体检测与位姿估计是机器人感知环境的基础,它赋予机器人一定的“智能”,在无人干扰的情况下实现物体上下料、装配、搬运等任务。然而,当机器人处在非结构环境下时,同种或不同种物体之间的无序交错堆叠、相互遮挡,给物体检测和位姿估计带来了非常大的困难。因此,本课题研究一种三维物体检测、位姿估计与抓取的方法,可使机器人在上述复杂的情况下仍能完成任务,并针对钢板抓取这一实际应用展开研究。本文的主要工作包括以下几个方面:1)针对SSD网络中小物体检测性能的缺失,提出了一种改进特征融合的SSD物体检测算法,有效的提升了小物体的检测性能。文章通过使用反卷积将具有强语义信息的高层特征添加到低层特征层中,并结合跳跃连接加速网络训练,提升物体检测能力;且在各特征层融合处,利用神经网络自动学习的特点,提出自适应加权连接。2)为降低模板匹配中的重复识别和误识别结果,提出了一种目标物体感兴趣区域的模板匹配算法。本文利用改进的SSD获取物体的感兴趣区域,且只在感兴趣区域内使用模板匹配,实现了物体误识别率的降低。为进一步去除物体局部误识别,通过改进模板聚类的方法,提出了一种基于相似空间位置的模板聚类方法。3)针对三维物体表面具有的平面特征,根据需求不同,提出了两种不同的位姿估计方法。一种是根据平面特征设计的粗糙位姿估计方法,可满足快速但精度不高的抓取需求;另一种是利用模板匹配的精细位姿估计方法,该方法适用于平面物体或三维物体。此外,利用位姿验证策略,可进一步剔除位姿估计不准确的结果。4)针对相机精度,视野范围等问题,提出了二次检测、二次位姿估计的方法。第一次检测、粗糙估计物体的位姿,目的是使机器人末端移动到物体的正上方,达到相机生成点云误差最小的目的。第二次检测、精细估计物体的位姿,目的是使估计的物体位姿误差最小。5)以深度相机、彩色相机、磁霸末端和UR3/5机器人构建硬件平台,以ROS系统、TensorFlow神经网络库、Opencv图像处理库、PCL点云处理库和MoveIt运动规划库构建软件框架。在物体混乱堆叠的抓取实验场景中,验证了整个系统的有效性和可行性。
其他文献
本文时新旧会计准则在实务操作用的主要变化进行分析,并针对新会计准则的实施对银行经营的影响提出了若干应对建议。
<正>农业部《关于积极开发农业多种功能,大力促进休闲农业发展的通知》要求,休闲农业产业的接待人次和营业收入不断提升,布局优化、类型丰富、功能完善,为城乡居民提供看得见
依据甲乌拉铅锌矿已有的地质、矿产、物探、化探等资料,建立了典型矿床预测模型,采用火山岩型预测方法类型对其深部及外围资源潜力进行了预测.预测深部Pb+Zn资源量656741t;外
目的:探讨大黄素对肺炎链球菌肺炎小鼠肺组织炎症反应及丝裂原活化蛋白激酶p38(p38MAPK)表达的影响。方法:采用32只雌性健康BALB/c小鼠分为4组,每组各8只,分别为空白对照组、
目的探讨复方煤焦油洗剂治疗银屑病的药效学机制。方法采用小鼠尾鳞片表皮、鼠阴道上皮实验模型,观察复方煤焦油洗剂对上皮细胞分裂及表皮细胞分化的影响;采用豚鼠磷酸组织胺致
在产业链中判断谁是基础产业部门,一是看其所处的产业链位置,二是看其在产业链中的重要性。基础产业部门往往具有公共显示度较低、显著的报酬递增性、产业进入门槛高、发展的
<正> “非典”主要由新型冠状病毒引起,起病较急,发热在38.5℃以上,同时伴有头痛、关节酸痛和乏力;呼吸道症状为干咳少痰,严重者呼吸加重、气促;少数危重病人会呼吸窘迫;肺部
<正> (四)复数域和实数域中的因子分解根据定理2,复数域和实数域上的多項式永远可以唯一地分解成不可約多項式的乘积.可是定理2並沒有告訴我們复数域和实数域上不可約多項式
根据人社部最新资料,截至2018年一季度末,全国12个省与社保基金理事会签署委托投资合同,合同总金额4 750亿元,其中3 066.5亿元基本养老基金已入市,后续还有更多资金投资股市
为了减轻零部件产能不确定性所造成的制造商过高库存成本的影响,采用信息共享或者加班赶工及资源外包的方式,建立了多个供应商之间的两种横向协同模型,减量模型和增量模型。