控制与决策

北大核心,JST,Pж(AJ),EI,CSCD

国内刊号:21-1124/TP

国际刊号:1001-0920

控制与决策杂志2024年第11期:基于Transformer-CNN混合架构的跨模态融合抓取检测

发布日期:

作者:王勇,李邑灵,苗夺谦,安春艳,袁鑫林

单位:重庆理工大学 两江人工智能学院,重庆 401135,,重庆理工大学 两江人工智能学院,重庆 401135,,同济大学 电子与信息工程学院,上海 200092,,重庆理工大学 两江人工智能学院,重庆 401135,,重庆理工大学 两江人工智能学院,重庆 401135,

关键词:机械臂抓取检测;跨模态;RGB-D融合;Transformer;CNN

在机器臂抓取检测领域,RGB图像和深度图像的处理效率仍有很大提升空间.鉴于此,提出一种基于Transformer-CNN混合架构的新型跨模态交互融合的机械臂抓取检测方法.为了充分利用RGB和深度图像的特征信息,开发一种高效的跨模态特征交互融合模块,用来校准RGB和深度图像相对应的特征信息,并交互增强双模态的特征.此外,设计一种Transformer与CNN并行的网络模块,结合CNN的局部建模能力和Transformer的全局建模能力,获得更好的特征表示,从而提高抓取检测性能.实验结果表明,所提方法在Cornell与Jacquard抓取数据集上分别达到了99.1%和96.2%的准确率.在真实场景下的抓取检测实验验证了所提方法可以有效预测各种场景下物品的抓取位置.

来源:2024年第11期

《控制与决策》期刊编辑部

查看控制与决策杂志2024年第11期

声明

严正声明:本站非期刊官网,非中介代理。

本站仅提供学术规范服务:快速预审、润色编辑服务、中英文查重、降重、去重服务、推荐合适的期刊投稿等学术规范服务。 如需提供学术规范服务请联系在线编辑。

联系我们

  • 地址:沈阳市和平区文化路3巷11号
  • 电话:024-83687766
  • E-mail:kzyjc@mail.neu.edu.cn

咨询工作人员