EN
返回档案库

档案库 · 产品创意 · 产品决策 · 2025–2026

NVIDIA的Signs把普通网络摄像头变成美国手语教师

美国手语是美国第三大语言,却几乎没有AI工具;NVIDIA免费的Signs平台通过3D虚拟形象和实时摄像头反馈来教授手语。

NVIDIA · American Society for Deaf Children · Hello Monday/DEPT

创意是什么构建一个免费的网页平台,用3D虚拟形象展示美国手语手势,并通过计算机视觉利用摄像头实时评分学习者的手语表现。伤筋动骨

当时的题目

American Sign Language is the third most prevalent language in the United States, yet vastly fewer AI tools are built with ASL data than with English or Spanish. Since most deaf children are born to hearing parents, families also lacked an accessible, accurate way to start learning the language early.

它是怎么成立的

美国手语在美国是第三大常用语言,但在AI领域几乎无声无形:基于美国手语数据的工具远少于英语和西班牙语。这一差距对家庭影响最大——大部分聋儿由听力正常的父母所生,他们需要可靠的方式学习手语,以与最早六七个月大的孩子交流。

NVIDIA、American Society for Deaf Children和Hello Monday/DEPT打造了Signs——一个免费的交互式网页平台。3D虚拟形象演示经流利美国手语使用者和翻译验证的手语库中的手势,AI工具则观察学习者的摄像头,实时反馈手和手指位置的错误。用户可在任何设备上学习,流利手语者亦可上传视频,每次学习都在为日益增长的美国手语数据集积累数据。

平台上线时含100个手势,目标收集40万个视频片段,覆盖1000个词汇,将作为视觉词典和可访问AI的训练资源——包括视频会议手语识别和数字人应用。在第30届年度威比奖中,Signs荣获三个类别奖项,包括一项人民之声奖,证明这是与未被充分服务的语言社区共制的技术,而不是为它们服务的典型范式。

妙在哪

  • 问题在于数据稀缺,而非动力缺乏:美国手语学习者和使用者数以百万计,但缺少经验证的开源数据集。
  • 实时摄像头反馈让免费工具如私人教师般,而非单一视频词典。
  • 由流利手语者和翻译验证,使教学更准确,足以指导聋儿的学习。
  • 每个学习者和贡献者都在丰富公开数据集,从而改善整个美国手语技术生态,而非仅自带产品。

做出来什么

Signs launched with 100 signs and a stated goal of growing a dataset of 400,000 video clips representing 1,000 signed words, validated by fluent signers for use as a teaching dictionary and as public data for ASL-based AI applications. At the 30th Annual Webby Awards it won in three categories — Accessibility & Inclusion, Responsible Innovation, and Accessible Technology, the last with a People's Voice Award.

报道How Signs teaches ASL (NVIDIA blog)

可以借走的

当一种语言有用户但缺乏数据时,瓶颈不在需求,而在于基础设施;构建能产生数据集的教学工具,数据集本身就会成为平台。

后来

Signs在AI商业可信度领域成为NVIDIA的成功旗舰,并成为无障碍的参考项目:在第30届年度威比奖中,它荣获应用程序、软件和沉浸式内容(无障碍与包容)、网站(责任创新和无障碍技术)以及人民之声奖。NVIDIA表示该数据集将对开发者开放,支持AI代理、数字人和视频会议技术,团队并计划增加非手部信号如面部表情、头部动作、俚语及地区变体。

资料来源

发现哪里写错了?告诉我们。

轮到你了

你刚读完一个点子。把你手上的题目说出来,看看谁接过同样的题。

免费账号 · 3 次免费提问 · 不用绑卡

相关案例