美国国家科学基金会收敛加速器奖$ 1百万赠款,以团队

资金支持计算可达性研究来分析ASL面部表情

亚光huenerfauth,教授,计算在RIT无障碍研究专家,获得了美国国家科学基金会收敛加速器奖共同牵头一个多学科的团队,将分析并在周围海拔面部表情构建应用程序。

技术研究员的澳门银河官网 - 线上游戏平台是已经获得了美国国家科学基金会授予使用人工智能来更好地理解面部表情的符号和语言的作用,一个团队的一部分。

作为该项目的一部分,研究人员将开发一个应用程序来传授相关的面部表情和头部姿势美国手语学习者。他们还将开发一个应用程序,使得一个匿名的签名者的面部表情,当隐私是一个问题。

在近100万$补助的部分 NSF收敛加速器,一个程序,支持使用启发,以团队为基础,和多学科的研究能够产生解决方案,以全国规模的社会挑战。

该项目被称为 数据和AI与应用,美国手语(ASL)的教育和语言研究建模语言表情隐私聋哑方法,是共同领导在三所大学的研究人员组成的多学科团队。该团队包括 亚光huenerfauth,教授和专家在计算在RIT的无障碍研究;季米特里斯梅塔克萨斯,在罗格斯大学计算机科学系特聘教授; mariapaola D'IMPERIO,在罗格斯大学语言学的特聘教授;和卡罗尔数Neidle,在波士顿大学语言学和法国的教授。

“这是学习如何过渡的基础研究到应用技术发展的一个令人兴奋的机会,说:” huenerfauth,谁也RIT公司的董事 信息学院(ischool)。 “在这个方案集成外联技术的早期,在人机交互和用户体验领域的最佳实践,它强调以用户为中心的设计方法的研究和开发过程中对齐最终用户的方式。 ”

该项目看起来在面部表情和头部姿势,这是口头语言和手语,包括ASL的重要组成部分。在美国,ASL是50多万人,第三研究最多的“洋”语言沟通的主要手段。

整个九个月的项目中,研究人员的目标是创造有利于工具,加快研究在双方签字和口语面部表情的作用。

第一应用的研究人员正在建立将有助于ASL第二语言学习者产生面部表情和头部姿势传达的语言的语法信息。专家称,这是学习翔升作为第二语言的最具挑战性的方面之一。

他们还将开发去识别签名人的视频通信,同时保留必要的语言信息表示非手动的应用程序。这将使ASL用户有敏感主题的私人谈话。要做到这一点,研究人员将建立四维脸部追踪算法,可以被用来面部几何从面部运动和表情分离。

“这是谁寻求他们自己的语言专用通信翔升用户一个真正的问题,说:”数Neidle。 “模糊的脸是不是隐藏了签名者的身份的一个选项,因为重要的语言信息表示非手动将丢失。”

在RIT,huenerfauth是的董事 中心可访问性和包容性的研究(CAIR),在那里,他和一队学生和教师的研究人员正在努力转变发展文化事业,使技术进行访问。学生在实验室CAIR做研究,将参与在NSF收敛加速器项目。

huenerfauth说,RIT将在该项目的人机交互方面的重要作用。

“我们将进行的软件正在考虑的原型(演示)访谈和初步测试,以收集来自技术的用户的需求和喜好,说:” huenerfauth。 “使用该技术的人将包括学生的学习ASL,以及流利的ASL签名人谁是聋人和听力的-”。


推荐新闻