眼睛会动,还能与人交谈、拥抱,iCub人形机器人这次具备远程操控

人工智能 机器人
iCub 人形机器人又升级了,这次可远程操控和感知交互。

早在 2011 年,我们就已经听说过像孩子一样的 iCub 人形机器人,它长这样(下图 1 右):

其实 iCub 的第一个版本可追溯到 2008 年,最初是根据一个三岁孩子设计的,现在算来,它应该是一个十多岁的「青少年」。近日,原班团队,即来自意大利理工学院(Italian Institute of Technology,IIT)的研究者,又为我们带来了更加先进的 iCub 3 双足机器人,相比于初代 iCub,iCub 3 又长高了一点,并且更大、更强、更重。

图 1:更大的 iCub3(左),初代 iCub(右)

iCub3 比初代 iCub 高了 25 厘米(到 1.25 米),重量也增加了 19 公斤(至 52 公斤),具有 54 个自由度,腿部更加强大,并在包括躯干、肩膀和腿在内的部位安装执行器。iCub3 头部和初代 iCub 头部保持一致,但脖子长了一点,使得 iCub3 比例更加协调。

在传感器方面,iCub3 有一个深度摄像头和最新一代的力感应,可承受更高的机器人重量。iCub3 具有更高容量的电池,位于躯干组件内。

iCub 3 头部内置了可当做眼睛的立体旋转摄像头、可反映嘴部与眉毛动作的 LED 线条。

我们可以将 iCub3 理解为一个化身平台(avatar platform)——也就是说,一个人形机器人,可以体现出更具生物类型的远程人形机器人。

在通过从热那亚到威尼斯实现的演示中,远程操控用到了所谓的 iFeel 系统。IIT 可穿戴 iFeel 套件跟踪操作员的身体动作,化身系统将其传输到威尼斯的 iCub3,然后 iCub3 会像研究者在热那亚一样移动。此外,用户还需配备一个头戴设备,可以跟踪自身的表情、眼部运动。这些头部特征被投射到 iCub3 上,以高保真度再现:化身和人类具有非常相似的面部表情。

用户戴着感应手套,手套可以跟踪他的手部动作,同时提供触觉反馈。

借助化身系统,远程用户可以与威尼斯的向导微笑、交谈和握手:化身相应地微笑、交谈和握手。

类似地,当向导在威尼斯拥抱虚拟形象时,热那亚的操作员也能感受到拥抱,这要归功于 IIT 的 iFeel 套装,该套装还提供上身触觉。此外,热那亚的远程用户和威尼斯的向导之间的对话是可能的,这要归功于记录和传输操作员语音的系统,以便化身可以在威尼斯重现它。传输通过标准光纤互联网连接进行传输,仅产生几毫秒的延迟。

完成上述功能,需要的设备包括:

  • HTC Vive PRO eye4 headset
  • VIVE Facial Tracker5
  • iFeel 感官和触觉套装
  • SenseGlove DK17 触觉手套
  • Cyberith Virtualizer Elite 28 全向跑步机

总而言之,所有这些设备都允许操纵、运动、声音甚至面部表情从人类重新定位到机器人。面部表情重定向适用于眼睛注视和眼睑状态以及用户的嘴巴。

「我们的 iCub 3 化身系统在一个有腿的人形机器人上进行了验证,允许进行远程语言、非语言和物理交互,这是寻找在所有交互方面模拟人类平台完美起点。」 IIT 项目协调员 Daniele Pucci 表示。「在不久的将来我们可以期望这个系统在所谓的元宇宙中的应用,它实际上是远程人类化身。」

责任编辑:张燕妮 来源: 机器之心
相关推荐

2021-08-17 16:06:57

机器人人工智能AI

2024-02-28 12:43:00

数据训练

2022-10-17 15:35:32

人形机器人机器人

2023-09-25 08:10:50

人形机器人

2023-03-28 07:49:38

2021-02-19 13:17:19

比特币机器人加密货币

2023-08-30 11:23:21

人工智能机器人技术

2022-11-02 16:28:03

人工智能机器人

2023-10-05 13:04:27

腾讯机器人RoboticX

2018-07-05 17:01:42

人工智能机器学习机器人

2020-10-27 18:48:14

消费者机器人购物

2023-12-01 12:31:43

AI训练

2020-02-10 10:20:25

机器人人工智能系统

2009-10-10 14:07:56

2017-05-25 12:05:03

机器人软体机器人大蜘蛛

2020-10-15 15:42:00

人工智能

2022-08-20 17:54:37

机器人开发
点赞
收藏

51CTO技术栈公众号