火星科技网您的位置:首页 >人工智能 >

机器人使用触觉手语帮助聋盲人独立交流

导读 Jaimi Lard 就位。她将左手托在设备上,将手指放在设备顶部,然后举起右手。当 Lard 准备好后,Samantha Johnson 在连接到机器人的笔

Jaimi Lard 就位。她将左手托在设备上,将手指放在设备顶部,然后举起右手。当 Lard 准备好后,Samantha Johnson 在连接到机器人的笔记本电脑上按下几个键,然后,随着机械嗡嗡声响起,设备开始移动。

当呼呼声停止时,机器人手的三个手指直接指向上方,而拇指和食指的指尖接触,形成一个圆圈。Lard 用她的左手感受机器手所处的位置,然后移动她的右手做出同样的手势。

“F,完美!” 约翰逊惊呼。

该机械臂,由约翰逊,一个生物工程研究生在东北建,目的是为了产生触觉的手语,以使人们谁,像猪油一样,都是聋哑人和盲人更多的独立性。Lard 是聋盲社区的成员之一,该社区正在帮助约翰逊测试机器人并就如何改进机器人向她提供反馈。

“我对这个帮助改进这个机器人的新机会感到非常兴奋,”拉德通过翻译说。

约翰逊想出了一个触觉手语机器人的想法,她将其命名为 TATUM,触觉 ASL 翻译用户机制,作为东北大学的一名本科生。她在大二时参加了手语课程,通过该课程,约翰逊与马萨诸塞州奥尔斯顿聋盲联络中心的人进行了互动,以提高她的技能。

聋哑人可以通过视觉手语与听力正常的朋友和家人交流,但对于聋哑人来说,语言必须是他们可以触摸的东西。因此,这意味着耳聋和盲人通常需要一名口译员亲自陪同,以便与不懂手语的其他人进行互动,这样他们才能感受到自己的手在塑造什么形状。

“当我看着翻译标志时,我问,'没有翻译,你如何交流?'”答案很简单,“'我们没有,'”约翰逊回忆道。

约翰逊说,开发触觉手语机器人的目标是创造一些东西,让依赖手语作为主要交流语言的人能够独立交流,而无需依赖他人翻译。她认为机器人在家里、医生办公室或其他人可能想要进行私人交流或可能没有口译员的环境中可能会有所帮助。

约翰逊仍处于开发机器人的早期阶段,作为她的论文,东北大学生物工程助理教授 Chiara Bellini 作为她的顾问。目前,约翰逊正专注于手册字母表的字母,并训练机器人用手指拼写一些基本单词。

最终目标是让机器人精通手语,以便设备可以连接到基于文本的通信系统,例如电子邮件、短信、社交媒体或书籍。这个想法是机器人将能够向用户签署这些消息或文本。Johnson 还想让机器人可定制,因为就像在任何其他语言中一样,在不同地区使用独特的标志、单词或短语,并且根据文化背景,有些标志意味着不同的事物。

标签:

郑重声明:本文版权归原作者所有,转载文章仅为传播更多信息之目的,如有侵权行为,请第一时间联系我们修改或删除,多谢。