英伟达推出 AI 手语学习平台 借助 3D 虚拟形象学习 AI 实时反馈

华尔街见闻
2025.02.20 20:46
portai
我是 PortAI,我可以总结文章信息。

分析认为,该平台的推出也表明英伟达正在尝试拓展其 AI 业务,不再局限于 AI 硬件。

英伟达周四推出一款新的 AI 平台,旨在教授人们使用美式手语(ASL),以帮助弥合沟通鸿沟。这款名为 Signs 的平台正在创建一个已经验证的数据集,供手语学习者和基于 ASL 的 AI 应用开发者使用。

这款交互式网页平台由英伟达、美国聋人儿童协会(American Society for Deaf Children)以及创意机构 Hello Monday 联合推出,能让手语学习者通过该平台访问 ASL 手语库,借助 3D 虚拟形象学习词汇,同时使用 AI 工具分析摄像头画面,实时反馈其手语表现。任何水平的手语使用者都可以贡献自己的手语视频,帮助建立一个开源的 ASL 视频数据集。

英伟达表示,该数据集计划扩展至 40 万段视频,涵盖 1000 个手语单词,并由流利的 ASL 用户和翻译员进行验证,以确保每个手语的准确性,从而打造一个高质量的视觉字典和教学工具。

英伟达团队计划利用该数据集进一步开发 AI 应用,以打破聋人群体与听力正常人群之间的沟通障碍。这些数据将向公众开放,支持构建无障碍技术,包括 AI 代理、数字人应用以及视频会议工具。此外,该数据还可用于增强 Signs 平台,并为整个 ASL 生态系统提供实时的 AI 支持和反馈。

英伟达表示,在数据收集阶段,Signs 已成为一个强大的 ASL 语言学习平台,为个人提供学习和练习 100 个基础手语词汇的机会,从而帮助他们更有效地与使用 ASL 的亲友沟通。

目前,Signs 主要关注手势和手指位置的学习,但 ASL 还包含面部表情和头部动作,以传达更丰富的含义。Signs 团队正在探索如何跟踪并整合这些非手部信号,以改进未来版本的学习体验。

此外,他们还在研究如何在 Signs 中加入地区变体和俚语表达,以丰富 ASL 数据库,并与罗切斯特理工学院(Rochester Institute of Technology)无障碍与包容性研究中心的研究人员合作,以评估并进一步优化 Signs 平台,使其更适用于聋人和听障用户。

Hello Monday/DEPT 创始合伙人 Anders Jessen 表示:

“改善 ASL 的无障碍性是一个持续进行的过程。Signs 可以满足人们对高级 AI 工具的需求,帮助跨越聋人群体与听力正常群体之间的沟通障碍。”

分析认为,该平台的推出也表明英伟达正在尝试拓展其 AI 业务,不再局限于 AI 硬件。英伟达目前是 AI 行业的主要芯片供应商,其芯片被大多数 AI 公司用于训练和运行 AI 模型。此外,英伟达也在开发自己的 AI 模型和软件平台。由于众多 AI 公司竞相采购英伟达的芯片,该公司股价在过去一年中上涨了 100% 以上,公司市值已超过 3.4 万亿美元。