欢迎光临散文网 会员登陆 & 注册

元宇宙数字孪生机械臂抓取数据集

2023-02-01 12:17 作者:跨象乘云  | 我要投稿

作为一种游戏概念和现象,元宇宙自 90 年代以来就一直存在并蓬勃发展,但关于它的信息却只限于一个小小的游戏亚文化小团体。直到现在,元宇宙的概念才获得了更重要的社会货币。而这个主题的未来看起来是光辉灿烂的。我们知道,这是因为科技领域的一些大公司已经从他们的研发预算中拿出了一笔可观的资金来培养和发展这个勇敢的新世界。谷歌、微软、苹果、Nvidia、Adobe 和许多其他公司都在元宇宙上下重注,成为未来最新的个人和专业互动平台。

机器人技术和元宇宙的融合

元宇宙与机器人技术重叠的承诺是,所有这些都将在未来几十年成为普遍的技术。最近在意大利的热那亚展示了将这种幻想转变为现实的第一步。在第 17 届国际建筑展的意大利馆,意大利技术研究所的研究人员公布了 iCub3 化身系统。

iCub3

该发明有两个玩家:第一个是机器人,第二个是操作者。机器人反映了操作者的行动。在这种情况下,操作员坐在离机器人 300 公里远的地方,穿上一件连体衣,用它来指挥机器人的行动。这套连体服包括跟踪操作者身体运动的手套和跟踪用户面部表情、眼睛运动和声音调制的 VR 头盔。这套连体服允许操作者控制机器人,同时将机器人的所有触觉传回给操作者。机器人和操作员之间的连接是通过宽带互联网连接建立的。这标志着仿人机器人首次被用于代表人类。iCub3 开辟的诱人的远程旅游途径只是新冰山的一角。一个激动人心的新世界正以其令人难以置信和令人心动的市场机会向我们招手!

在城市交通领域的另一个使用案例中,汽车制造巨头现代汽车公司在一次会议上分享了其元交通概念。在元移动性的支持下,该公司设想将 "人工智能和自动驾驶等扩展机器人技术 "模糊化。通过这一概念,现代公司正在提请人们注意,在未来,机器人将作为现实世界和虚拟世界之间的通道,也就是说,机器人和人工智能驱动的将运行我们的车辆。在这个乌托邦式的愿景中,再加上物联网的下一个大概念,将产生一个无人驾驶汽车将促进人类交通的世界。

但这还不是全部,元宇宙和机器人技术的结合也正在闯入新的领域,进入直观的手术。这种手术涉及机器人执行远离手术室的医生的动作。手术适应性机器人、人工智能和增强现实的结合,正在迎来明天激进的新医疗景观。

要像互联网一样在我们的生活中无处不在,元宇宙仍有很长的路要走。然而,一旦这个概念开始在商业上获得成功,它的指数式上升将成为定局。就像互联网一样,它将深深地渗入,并颠覆--为了更好地--世界的运作方式。

人们对由机器人系统驱动的智能工厂越来越感兴趣,以解决重复性、费力的任务。在机器人驱动的智能工厂应用中,一项有影响但有挑战性的任务是机器人抓取:在不同的环境中使用机器人手臂自主抓取物体。机器人抓取需要各种计算机视觉任务,如物体检测、分割、抓取预测、抓取计划等。虽然在利用机器学习进行机器人抓取方面取得了重大进展,特别是在深度学习方面,但一个巨大的挑战仍然是需要大规模、高质量的 RGBD 数据集,涵盖广泛的场景和排列组合。为了解决这个大的、多样化的数据问题,受到了最近兴起的元宇宙概念的启发,它大大缩小了虚拟世界和物理世界之间的差距。元宇宙允许我们创建真实世界制造场景的数字双胞胎,并虚拟出不同的场景,从中产生大量的数据用于训练模型。

MetaGraspNet 是一个大规模的基准数据集,用于通过基于物理学的元空间合成的视觉驱动的机器人抓取。拟议的数据集包含100,000 张图像和 25 种不同的物体类型,并被分成 5 个难点,以评估不同抓取场景下的物体检测和分割模型性能。第一阶段包括详细的物体检测、分割、布局注释和布局加权的性能指标脚本。

@article{chen2021metagraspnet, author = {Yuhao Chen and E. Zhixuan Zeng and Maximilian Gilles and Alexander Wong}, title = {MetaGraspNet: a large-scale benchmark dataset for vision-driven robotic grasping via physics-based metaverse synthesis}, journal = {arXiv preprint arXiv:2112.14663}, year = {2021}

}

欢迎通过微信搜索【跨象乘云】公众号(kxcy_ai)或扫描下方二维码,关注后发送关键字【230201】,免费获取 元宇宙数字孪生机械臂抓取数据集。跨象乘云™ 原创实验演示视频内全部代码、数据集仅授权予个人用户学习与实验使用。禁止用于二次销售、分发传播、课堂教学及培训用途。校企用户采购请通过公众号菜单【了解我们】->【商务咨询】联系。  

跨象乘云公众号:kxcy_ai


元宇宙数字孪生机械臂抓取数据集的评论 (共 条)

分享到微博请遵守国家法律