昇腾AI的温度：关爱超2700万听障者，破解手语学(2)

为了实现足够精准的手语翻译，千博信息足足用了超过50万条汉语到手语的翻译训练语料，以及超过20万条手语到汉语的识别训练视频。

而那些探索者们的科研成果，将为人类，尤其是少数群体，点亮更多盏希望的灯火。

就像中英文之别，手语作为一种无声的语言，在不同地区有不同的”语法”，比如北京人打手语，海南人可能看不懂是什么意思。

这又是一个用科技惠及特殊群体的故事。一些患者因疾病污名化，遭受着歧视、排斥和不公平的待遇，而AI强大的计算能力，能帮助更快发现有效药物分子，并实现药物研发流程的整体优化，为治愈一些顽疾带来希望。

在有限的语料环境下，手语多模态模型中的小样本学习，还能提升手语翻译的可懂度，让虚拟人手语翻译的习惯更加符合听障人士的认知。

另一边，基于昇腾AI的“鹏程.神农”平台，亦面向生物医学领域，用AI辅助加速制药流程，大幅提升多肽样本库的生成效率。原本用传统方法筛出4000多种候选多肽，需要花费长达40年，“鹏程.神农”则能够将生成时间缩短至数月，并生成高达30万种候选多肽。

手语教育支撑平台的虚拟数字人演示同声手语

AI在蛋白质结构预测、分子动力学、生物制药等科研领域日渐发挥出加速计算的价值。中国科研力量也加入了这场激动人心的AI破解生命密码竞赛。

学术化的大模型创新已层出不穷，但真正走到规模化部署的，仍然寥寥。

从算力基础设施、AI框架到大模型，AI技术近年来种种的突破性进展，正将探索者的春天，推至我们的面前。

“从无声里突围，你心中有嘹亮的号角。”

比如，一体机中的虚拟人会演示国标手语动作，让学生点选对应词汇；或者它会给出文字，识别学生做出的手语是否正确。答题完毕后，一体机还能给出综合评价。

手语多模态模型在识别手语、文字信息后，可以自动生成对应的图像。它的表情驱动及唇语计算，能帮助手语虚拟人增加新的输出通道，让手语虚拟人表达能结合表情、唇语、手语，使手语翻译更加生动精准。

学生使用手语教考一体机

手语多模态模型再经知识蒸馏，形成可用的高性能小模型，部署在手语教考一体机上，通过边缘盒子内的昇腾AI硬件加速，为学生提供更精准的国标手语教学与测验功能。

但遗憾的是，直至今日，“国标”手语还远远没有像有声语言中的“普通话”那样普及。

江梦南（图源：央视《感动中国2021年度人物颁奖盛典》）

被折翼的孩子，更需要被关注和帮助，命途虽有异殊，温情和善意却能消解一些敏感和孤独，而医学与科技的进步，也许能通过打破沟通障碍，让更多的阳光，照进他们的生活。

《现代汉语词典》有6万多个词条，相比之下，手语仅有的约8000个词，显然很难表达日常学习中的所有知识。除了手语词汇标准亟待完善外，国家手语语法标准也尚未出台。这些问题，致使听障人士的跨区域交流更加困难。

仅用手语手势交流的他们，在学习时，往往面临无法准确理解、手语词汇更新慢、看不懂其他地域的手语“方言”等难题。

近年来，各地AI计算中心拔地而起。在更大规模跨域算力网络的支撑下，大模型参数规模逐渐从千亿迈向万亿，且凭借极高的泛化能力，高效孵化出不同的细分场景模型。这些模型落地后，又能以更丰富的数据反哺大模型基础能力。

“我们中国有几千万残障人士，我现在开始意识到要去考虑其他人，如果无残障做得非常完备，残障人士也能跟健全人一样轻松地活着，我觉得这才是更美好的世界。”江梦南说。

或者输入一段话，虚拟人能立即将其翻译成手语。

在课堂上，手语教育支撑平台的虚拟数字人可以辅助老师，进行手语教学。老师讲课时，平台能自动识别语音，实时转换成文字，并由虚拟人同步演示相应的手语动作。

在位于湖南的一所特殊教育学校，这个问题刚刚得到改善。

其同传、翻译能力，除了用在教学领域外，还可以复用到手语新闻播报、主持、服务引导等应用场景，减轻手语翻译人员的工作量。

编辑 | 漠影

为了考学深造，她付出常人难以想象的艰辛，靠读唇语、看板书和自学，终于走到中国最顶尖的学府，通过科研，致力于攻克生命健康的难题。

经过如此持续创新迭代的产业正循环，大模型正成为科研创新走向产业应用的重要枢纽，加速推动AI落地千行百业的进程。

文章来源：《生物信息学》 网址: http://www.swxxx.cn/zonghexinwen/2022/0714/715.html