由庆应义Graduate大学研究生院的研究团队开发的“ SlideFusion ”在轮椅背面装有一个装备有两个手臂的机器人,并将其作为另一个飞行员的化身进行控制,以实现对轮椅使用者的身体控制。 -它是一个辅助系统,可减轻行动负担。通过VR远程控制机器人手臂,并为用户提供帮助。
使用SlideFusion
SlideFusion是全方位定制动力辅助轮椅,内置于轮椅中的虚拟化身机器人以及面向轮椅使用者的注视跟踪模块的组合。
化身机器人由两条手臂组成,具有立体视觉和双耳听觉的面部部分,以及将它们连接起来的上身。远程操作员使用VR HMD(头戴式显示器)和数据手套进行无线控制。延迟保持在100毫秒以下。为了确保轮椅使用者的安全,机器人的手臂被限制在操作范围内,以致它们无法触及使用者的身体。
机器人由具有VR HMD和手部追踪功能的远
轮椅使用者可以佩戴带有IMU传感器的眼睛跟踪模块,该模块可以跟踪嵌入式头部的方向,例如眼镜。凝视数据与传感器测量的头部方向整合在一起,并与机器人的视觉反馈一起发送到远程操作员。由于视线叠加在从机器人观看的图像上,因此远程操作员可以实时确认轮椅使用者的视线。
轮椅使用者可以使用视线跟踪模块,以允许远程操作员从注视信息中实时识别其他人的兴趣区域。
远程操作员可以立即了解轮椅使用者的兴趣区域,并可以根据情况提供适当的支持,而无需进行口头交流。演示视频显示了一些示例应用程序,例如用手指导航和在桌子上拿杯子。
您可以用手指导航,在桌上拿起杯子,然后拿到一个人送给您的塑料瓶,而不是机器人的手。
远程操作员通讯
获取更多科技新资讯,欢迎订阅关注“科技全频”。
领取专属 10元无门槛券
私享最新 技术干货