博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
ROS下基于物体识别的机器人抓取算法以及机械臂实物抓取实验
阅读量:2049 次
发布时间:2019-04-28

本文共 830 字,大约阅读时间需要 2 分钟。

文章目录


前言

机器人感知环境通常依赖于各种接触型以及非接触型传感器,并在获取之后由图像处理系统进行图像处理和识别。

基于视觉的机器人能够及时感知外部环境的变化,并且方便智能机器人的控制系统做出相应调整,提高了机器人的灵活性和对外部环境变化的适应力。


一、物体抓取研究现状

1、物体抓取研究现状

(1)

在这里插入图片描述
(2)
在这里插入图片描述

2、抓取检测情况分析-2D

111


二、目前研究

1. 机械臂抓取检测

1. Cornell数据集介绍

Cornell抓取数据集中包含240种不同对象类型的抓取矩形框信息,包含约885张图片,885个点云信息,8019个抓取标签,其中包括有效和无效的抓取矩形框。

在这里插入图片描述

2. Cornell数据集下载

  1. 联系我邮箱发送。(联系方式见最后)

3. Cornell数据集训检测网络

联系我获取。(联系方式见最后)

4. Cornell数据集训练结果

在这里插入图片描述

Cornell数据集利用五折交叉验证方法进行训练。总体检测精度可以达到96%以上,且满足实时性要求,达到50FPS。

5. Cornell数据集仿真实验

所需知识: ROS、MoveIt、Rviz、相机模型、位姿变换

动图展示:

在这里插入图片描述


2. 机械臂抓取检测结合物体识别

1. VMRD数据集介绍

VMRD数据集总共包含31类物体,一共有5185张图片和17688个物体,每张图片中都会包含多个物体。数据集标签包括物体检测标签:类别、包围框坐标、抓取检测标签和抓取旋转框坐标。

在这里插入图片描述

2. VMRD数据集下载

  1. 联系我邮箱发送。(联系方式见最后)

3. VMRD数据集训检测网络

联系我获取。(联系方式见最后)

4. VMRD数据集训练结果

在这里插入图片描述

三、机械臂抓取和放置的实物实验

1. 实验所需理论

在这里插入图片描述

2. 机械臂抓取实验

在这里插入图片描述

动图展示
在这里插入图片描述

3. 机械臂放置实验

在这里插入图片描述

动图展示

在这里插入图片描述

4. 结合语音识别的机器人抓取交互系统框图

在这里插入图片描述


总结

喜欢的先给文章点个赞吧!不胜感激

如有咨询相关技术问题资料,请加qq:1843357931联系。如回复不及时,可以邮箱提醒)

在这里插入图片描述

转载地址:http://tfrof.baihongyu.com/

你可能感兴趣的文章