英伟达发布全新手语学习AI平台Signs

新闻

作者：微信文章
点击蓝字 关注我们
英伟达（NVIDIA）是全球人工智能领域的核心驱动者，其芯片技术支撑着从智能手机到自动驾驶的各类智能系统。目前全球超过75%的AI应用背后都有其技术驱动。2月20日，英伟达发布消息，称其携手美国聋童协会（ASDC）和创意机构Hello Monday，推出了一款名为 Signs的 AI 平台，旨在支持美国手语（ASL）的学习和无障碍人工智能应用的开发。本期我们将介绍Signs平台的功能和应用方向。
与其他手语学习工具相比，Signs平台有三大创新。

01

3D虚拟形象学习
Signs平台使用3D虚拟角色演示正确的手语手势，帮助用户直观地对比和学习，提升学习效率 。


02

实时反馈功能
用户可以访问Signs上的手语手势库，通过摄像头进行手语表达，系统会提供实时反馈，分析其手势并提供纠正建议，学习者能够及时调整和改进自己的手语表现 。


03

开放手语视频数据集
用户可以上传自己的手语视频，丰富和优化数据集，提高AI手语识别的准确性和可扩展性。英伟达计划创建一个包含40万个视频片段、涵盖1000个手语单词的数据集，进而建立一个高质量的手语视觉词典和教学工具。英伟达还将利用这一数据集进一步开发人工智能应用，打破听障人士和听觉正常人士之间的交流障碍。这些数据将作为资源向公众开放，用于构建无障碍技术，包括人工智能代理、数字人类应用和视频会议工具。它还可用于增强Signs的功能，并通过人工智能提供的实时支持和反馈，进而在生态系统中启用手语（ASL）平台。英伟达计划于今年晚些时候发布Signs的数据集。

video: https://mp.weixin.qq.com/mp/readtemplate?t=pages/video_player_tmpl&action=mpvideo&auto=0&vid=wxv_3872030054481805324目前，Signs 主要关注的是每个手势的手部动作和手指位置，而美国手语（ASL）还结合了面部表情和头部动作来表达意思。Signs 的研发团队正在研究如何跟踪这些非手动信号（non-manual signals），并将其整合到平台的未来版本中。除此以外，Signs的研发团队还在研究如何体现手语的细微差别，如地区差异和俚语，进而丰富其手语（ASL）数据库。
注：本期信息来源于英伟达官方发布内容。