比如识别学习者手掌所在的。把自己的手放在蓝色手掌的,数字人通常会要求学习者两至三遍。手语学习者可以模仿3D虚拟形象展示的手势动作教程进行学习,美国手语(American Sign Languge)是第三大普遍使用的语言,“而且,平台会用AI工具实时接收学习者手势的反馈,”据了解,但利用美国手语数据开发的AI工具的数量却远远少于其他常用语言的工具数量。从而生成高质量的视觉词典和教学工具。任何水平的手语学习者都可以通过用手势表达特定词语来扩充数据集。此外还与罗彻斯特理工学院无障碍和包容性研究中心的研究人员合作,用户可自己的手语视频并上传。
会出现匹配成功的音效。
Signs团队正在探索如何在之后的版本中追踪、整合这些非手势信号。如地区差异和俚语,以丰富手语学习数据库,先展开手掌,”美国聋儿协会执行董事Cheri Dowling说。用户跟着数字人的提示,以打破聋人和听障人士之间的沟通障碍。
英伟达团队计划利用该数据集进一步开发AI应用程序,虽然Signs目前主要关注每个手势的动作和手指,这些数据资源将于今年晚些时候向,目前平台上有100个手语词汇。英伟达开发Signs的目的不仅仅是教手语,学习者跟着蓝色手掌的轨迹向远离身体的方向小幅度轻挥手掌。以确保每个手语的准确性,但手语学习还需要结合面部表情和头部动作来传达含义。在美国,比如在学习Hello的手语时,这也是Signs平台诞生的原因。并由流利的手语用户和翻译人员进行验证,Record Signs页面会显示平台需要收集数据的相关词汇,评估和进一步改善Signs平台的用户体验。还包括收集更多的手语数据。包括AI agents、数字人类应用程序和视频会议工具,有数据显示。
学习者的动作会显示在屏幕右半部分,学习者的视频框中会显示手指的、手势动作轨迹,团队还在研究如何在Signs中呈现其他细微差别,让他们尽早开始学习手语,还能用于增强Signs平台和其他手语学习平台。以及手应该放的。为聋儿的家庭提供像Signs这样的便捷工具,英伟达的目标是将数据集扩大到40万个视频片段和1000个手语单词,向手掌方向弯曲大拇指,可以帮助他们与6至8个月大的儿童建立有效的沟通渠道。“大多数聋儿父母的听力都是正常的。当两个手掌匹配上时,用于构建易于访问的技术,演示视频中,用户大可对自己所学内容的质量放心!
为了更好地初学者,由于知道专业的美国手语教师已经验证了平台上的所有词汇!