为了使机器人能够“学习”手语,有必要结合不同的工程领域,如人工智能,神经网络和人工视觉,以及欠驱动的机器人手。“这项研究的主要新发展之一是我们将两个主要的机器人领域联合起来:复杂的系统(如机器人手)和社交互动和沟通,”该部门机器人实验室的研究人员之一JuanVíctores解释道。 UC3M的系统工程和自动化。
作为研究的一部分,科学家们首先要做的是通过模拟来指出每个方阵的具体位置,以便描绘西班牙手语的特定符号。然后他们试图用机器人手重现这个位置,试图让动作类似于人手可以做出的动作。“目标是使它们相似,最重要的是,自然。各种类型的神经网络都经过测试以模拟这种适应性,这使我们能够选择能够以一种人们可以理解的方式执行手势的那种神经网络。与手语沟通,“研究人员解释说。
最后,科学家证实该系统通过与潜在的最终用户进行交互而发挥作用。“与机器人接触的聋人报告了80%的满意度,因此反应非常积极,”机器人实验室的另一位研究人员Jennifer J. Gago说。实验使用TEO(任务环境操作员)进行,TEO是在UC3M的机器人实验室中开发的用于家庭的人形机器人。
迄今为止,TEO已经掌握了手语拼写字母,以及与家务相关的非常基本的词汇,这位研究人员解释道。科学家现在面临的一个挑战是继续开发这个系统,“使用完整的句子渲染更复杂的手势”,机器人实验室团队的另一名成员Bartek Lukawski说。然后,机器人可以被西班牙大约13,300名使用手语进行交流的人使用。
更广泛的目标是这种类型的机器人成为能够帮助熨烫(TEO也这样做),折叠衣服,提供食物以及与家庭环境中的用户交互的家庭助理。此外,“这些机器人手可以在其他类人生物中实施,并且可以在其他环境和环境中使用,”Jennifer J. Gago说。“真正重要的是,所有这些技术,我们所做的所有这些发展,都是为了包括社会所有成员。这是一种将技术视为对少数群体和多数群体包容的援助的方式,在一个民主国家,“胡安Víctores强调。