首站-论文投稿智能助手
典型文献
一种基于视角选择经验增强算法的机器人抓取策略
文献摘要:
针对混杂物体散乱堆叠下的机器人抓取场景,使用固定视角相机的视觉抓取存在成功率低的问题,提出一种基于深度强化学习框架的眼-手随动相机视角选择策略,令机器人能够自主地学习如何选择合适的末端相机位姿,以提高机器人视觉抓取的准确率和速度.首先,面向机器人主动视觉抓取任务建立马尔科夫决策过程模型,将视角选择问题转化为对视角价值函数的求解问题.使用编码解码器结构的反卷积网络近似视角动作价值函数,并基于深度Q网络框架进行强化学习训练.然后,针对训练过程中存在的稀疏奖励问题,提出一种新的视角经验增强算法,分别对抓取成功和抓取失败的过程设计不同的增强方式,将奖励区域从单一点拓展到圆形区域,提高了视角动作价值函数近似网络的收敛速度.先期实验部署在仿真平台中,通过搭建机器人模型及仿真抓取环境实施离线强化学习训练.过程中,使用提出的视角经验增强算法可以有效提高样本利用率,加快训练的收敛速度.基于所提出的视角经验增强算法,视角动作价值函数近似网络在2h以内可达到收敛.为验证所提视角选择策略的实际应用效果,将视角经验增强算法实施在真实场景下的机器人主动视觉抓取实验中.实验结果表明,采用该策略进行的视角优化有效提高了机器人的抓取准确率和抓取速度.相较其他方法,所提出的视角选择策略在实际机器人抓取中只需进行一次视角选择即可获得抓取成功率高的区域,进一步提高了最佳视角选择的处理效率.相对于单视角方法,混杂场景的抓取成功率提升22.8%,每小时平均抓取个数达到294个,具备了进入工业应用的可行性.
文献关键词:
机器人抓取;强化学习;机器人视觉;视角选择;视角预测;主动感知方法
作者姓名:
王高;陈晓鸿;柳宁;李德平
作者机构:
暨南大学信息科学技术学院,广东广州510632;暨南大学机器人智能技术研究院,广东广州510632;暨南大学智能科学与工程学院,广东珠海519070
引用格式:
[1]王高;陈晓鸿;柳宁;李德平-.一种基于视角选择经验增强算法的机器人抓取策略)[J].华南理工大学学报(自然科学版),2022(09):126-137
A类:
抓取速度,视角预测,主动感知方法
B类:
视角选择,增强算法,机器人抓取,混杂物,散乱,乱堆,堆叠,深度强化学习,随动,选择策略,地学,端相,机位,位姿,机器人视觉,立马,马尔科夫决策过程,过程模型,问题转化,对视,价值函数,编码解码器,反卷积,卷积网络,作价,网络框架,学习训练,训练过程,稀疏奖励,过程设计,值函数近似,收敛速度,先期,仿真平台,取环,离线强化学习,本利,2h,实际应用效果,真实场景,抓取实验,其他方法,成功率高,处理效率,单视,功率提升,工业应用
AB值:
0.308492
相似文献
机标中图分类号,由域田数据科技根据网络公开资料自动分析生成,仅供学习研究参考。