NVIDIA的AI平台提升了手语学习体验
realtime news Feb 21, 2025 16:15
NVIDIA与其他机构合作开发了一个由AI驱动的平台“Signs”，旨在促进美国手语的学习和发展，弥合聋人和听力正常群体之间的沟通鸿沟。
美国手语（ASL）学习者和基于ASL的AI应用程序开发者将从NVIDIA领导的一个新项目中受益，该项目与美国聋儿协会和创意机构Hello Monday合作推出。根据NVIDIA，这个名为“Signs”的AI平台旨在支持ASL教育并促进无障碍AI应用的开发。
构建全面的ASL数据集
“Signs”提供了一个经过验证的ASL手语库，用户可以通过演示手语的3D化身来扩大词汇量。该平台利用AI分析网络摄像头画面，实时反馈用户的手语技能。此项目不仅帮助学习者，也为ASL开源视频数据集做出贡献，所有技能水平的手语者都可以参与。
NVIDIA计划将数据集扩展到覆盖1,000个手语词汇的400,000个视频片段，这些片段由流利的ASL使用者和翻译员验证，以确保手语的准确性与可靠性，从而创建了一个高质量的视觉词典和教学工具。美国聋儿协会执行董事Cheri Dowling强调了这种工具的对聋哑儿童家庭的重要性，指出早期接触ASL可以从小就促进沟通。
ASL学习中的创新
除了作为学习平台之外，“Signs”数据集也有望成为开发弥合聋哑和听力正常群体之间沟通鸿沟的AI应用的宝贵资源。数据将公开用于构建无障碍技术，包括AI代理和视频会议工具。
该平台目前专注于手部动作和指位，但未来的发展计划包括面部表情和头部动作，这对ASL至关重要。此外，团队正在探索如何将区域变异和俚语术语集成，以丰富ASL数据库。
改进无障碍性的合作努力
Hello Monday/DEPT的创始合伙人Anders Jessen强调了持续改进ASL无障碍性的努力，“Signs”作为一种超越沟通障碍的重要工具。该平台的用户体验正在与罗切斯特理工学院包容与无障碍研究中心的研究人员合作进行评估和增强。
预计数据集将于今年晚些时候发布，为推进ASL教育和技术开发提供重要资源。即将到来的NVIDIA GTC全球AI会议的与会者将有机会现场体验“Signs”平台。
Image source: Shutterstock