昇腾AI大模型产业化落地 让手语学习更简单

图灵汇官网

近期,千博信息、中国科学院自动化研究所与华为联合推出了基于“紫东太初”三模态大模型与昇腾AI基础软硬件平台的手语多模态模型与手语教考一体机,旨在辅助听障群体更高效地学习与理解手语。我国约有2700万听障人士,手语作为他们主要的沟通工具,却面临着词汇更新缓慢、师资缺乏以及手语规范难以统一等难题。

创新性的手语多模态模型由“紫东太初”三模态大模型学习了1.2万个手语词汇、50多万条语法及70多万个语料样本,结合昇思MindSpore AI框架进行开发,实现了手语动作与视频、图片演示及文字解释的联动,极大地提升了初学者对手语含义的理解深度。随后,基于此模型,利用昇腾AI基础软硬件平台,开发出了手语教考一体机,这一设备目前已在湖南多家特殊教育机构投入使用,有效缓解了手语教师资源短缺的问题。

该一体机具备文本转图像生成、实时手语手势识别、表情及唇语分析等功能,能够及时学习并更新新词汇,适用于特殊教育学校、开设手语教师培训课程的大专院校、普及手语教育的公共地点及全国残联的基层培训中心。此外,AI手语助手功能则被应用于同声传译、新闻播报、客户服务等领域,展现出强大的实用价值。

在2021年底,华为联合伙伴共同启动了多模态人工智能产业联盟,经过近一年的合作,成功孕育出包括手语多模态模型与手语教考一体机在内的多个行业解决方案。随着AI大模型产业化的推进,丰富的数据与参数、广泛的应用场景不断优化模型性能,提升其智能水平与适应性,为行业应用提供了强有力的支持,形成了从模型创新到实际应用再到持续迭代的良性循环。展望未来,在中国算力网络的强大支撑下,AI大模型的创新速度与应用范围将显著增强,其在不同领域的应用也将更加多元。

本文来源: 图灵汇 文章作者: 付佳奇