内容起源：华为开发者大会 2021 HMS Core 6 App Services 技术论坛，主题演讲《手语服务，助您构建信息无障碍利用》。
演讲嘉宾：华为消费者云服务 手语服务技术总监 北京师范大学传授 郑璇
大家好。明天为大家分享一下 HMS Core 为什么要做手语服务，背地的故事和停顿。
首先看一下咱们服务的对象，据世界部门组织考察，以后有 4.6 亿听障群体，而我国至多有 2700 万听障群体，并且每年国家也有将近 2.3 万的听障儿童出世，然而仅有不到 5% 的听障群体应用助听器等辅助设施。因而因为信息的缺失，咱们听障敌人在日常的学习交换中存在一些艰难，这就是为什么在公共场所利用场景中手语的渠道十分迫切。
手语是什么？对听障群体意味着什么？对健全的群体意味着什么？咱们邀请到北京师范大学郑璇传授跟大家做分享。
大家好，我是北京师范大学的郑璇，很快乐跟大家面对面交换。其实我是聋人，大家可能看不出我左耳戴了助听器，然而我的书面语还是不错的，我的手语翻译是听力健全人士，然而她能够流畅地应用手语，我想在这一刻，聋人和听人界线不那么明显了，这要感激科技的提高。
明天要跟大家分享的是《解锁手语明码，走进无声世界》。
说到手语大家可能感觉很神秘，手语从语言学来说，是一种语言，我在读博士的时候，在复旦大学中文系语言学与利用语言学业余，我所做的是从语言学角度钻研手语到底是什么样的语言，手语是用手的手形、地位、静止、手掌朝向、配合面部表情和身材姿势，还有必要的口形，表白特定意思的交际工具，是一种真正的语言。为什么这么说？因为手语是有残缺简单零碎的语言，有它的语音、语汇、语法，如果孩子的父母是聋人，就能够把手语当作第一语言学习，这时倒退的门路和书面语根本是同步的，而且咱们从脑科学的角度能够证实，聋人在用手语的时候，大脑外面沉闷的区域根本也是左脑的语言区。
对于手语的位置曾经有了比拟成熟的法律规定，比方 2006 年联合国的残疾人权力公约，以及起初在中国签订的联合国教科文组织的岳麓宣言强调，手语和书面语是平等的，是两种语言，每个国家有任务爱护促成推广手语的应用，目前世界聋人联合会的数据显示，世界有 66 个国家和地区通过立法抵赖了手语的位置。
咱们国家在通用手语推广上，也有很大的提高，比方 2015 年和 2021 年别离是“十三五”和“十四五”的终点，咱们公布了两期《国家手语和盲文的规范化行动计划》，2018 年的时候，咱们出台了《国家通用手语词表》，这个回升到了国家语言文字标准的高度，在 2019 年又出版了《国家通用手语词典》，如果大家有趣味的话，能够间接从华为利用市场上下载 APP。
上图是一个中国残疾人艺术团的演员演示“中国”的手语打法，“中国”的手语打法是伸出手指，从左肩到右肩往下，这时模拟汉服当中传统服装的式样，来模拟中国的概念。
手语对聋人敌人意味着什么？
我是一名聋人，所以我十分粗浅地感触到手语对咱们的重要性，可能大家不晓得，超过 95% 的聋孩子，他们的父母是听力健全的人，这就意味着在家里他们不能像失常孩子一样顺利的跟父母沟通。国外有一个词形容：餐桌综合症，即便在餐桌上咱们跟父母都是最相熟的陌生人。所以，手语的染指能够扭转这个情况。
当他们成长进入学校当前，手语能够作为教学语言，连贯孩子和世界，促使他们对常识的学习；当他们走入社会当前，能够通过手语跟普通人建设连贯，当社会上每个人都会手语，聋人敌人就会感触到平等和尊重；当他老了当前，手语会为他营造一个精神家园，聋人敌人对手语是十分有感情的，已经有句诗刻画他们对手语的感情，“如果你砍掉了我双手，我就用双臂打手语，如果你砍断了我的双臂，我就用双肩打手语”。
我已经屡次在高校教手语课，学生们问我：“老师，手语要怎么示意我爱你？”手语对青年学生来说是技能能力，对刚出生的婴儿能够作为早教益智的伎俩开发他的智力，当他走入社会当前，如果他会手语，其实有助于构建信息无障碍的社会，让他晓得每个人都能够接收世界的多元性，让这个世界更美妙。此外，手语能够在特地的时候沟通，比方当环境嘈杂的时候，当机密交换的时候，手语都十分地有用，当老去当前，有助人助己的意义，以前是他帮忙他人，然而每个人都会老去，听力会降落，手语能够作为视觉语言撑持他的沟通。
我本人也有过多年的手语教学提倡和科研的经验，我本人十分观赏一句话“如果你接收了一个人，那你必将接收他的语言，反过来如果你回绝了一个人的语言，那就是回绝了他自身”。我已经在美国的孔子学院，教美国的聋孩子学习中国的手语和中国文化，我已经在重庆师范大学的课堂上教空乘业余学生学习手语，我已经拍摄过《我和我的祖国》手语歌的 MV，我也已经跟南京聋人学校的老师和同学们，一起编创咱们的国学手语的图书。
做这些事的时候，我就有一个粗浅的感触，手语其实并不是小众的语言，离每个人都不远，咱们说手语是桥梁，能够连贯世界上每一座孤岛，手语是资源，让咱们明确每种语言独特的美，它还是人生教训的传承，是团结奋斗的桥梁，是聋听共建的纽带。
我作为参谋参加这样的我的项目，咱们的愿景是：手语并不边远，触手可及。其实每一个人在年轻当前，在生病当前，在某些非凡的情况下，都会变成所谓的“残障者”。
手语不神秘，其实手语人人可学。比如说，这个手势示意一个人，那人从远到近是来，从近到远是去，两个人相遇、离开、追赶，你看，咱们一下能够把一串手语词学会，真的并不难。
手语也不狭窄，海纳百川，咱们不心愿聋人敌人外部有什么手语群体、书面语群体的撕裂，我真心心愿，咱们能够一起交换、一起建设家园、一起共享古代生存的便当。
手语更加不是一个小众的语言，咱们能够开脑洞，能够打造一个手语的生态系统和新的经济体。从玻璃墙到破壁者，华为走出了要害一步。参加这个我的项目的过程当中，其实也经验了十分多的崎岖，我集体十分地荣幸能参加其中。我本人是一名聋人，我本人是手语言学的研究者，对于咱们来说，这个产品能够帮忙到咱们。然而在当初可能不是所有的人都可能了解，然而咱们非常高兴通过一段时间的攻关，终于有了一个阶段性的成绩，我想，光明给了咱们彩色的眼睛，然而我却用它寻找光明，从光明中走过的眼睛，是世界上最亮堂的眼睛。
最初我想教大家两个手语。
第一个是欢送欢呼的意思，咱们欢呼这个平凡的时代。
第二个是谢谢，谢谢大家给了咱们无声世界新的心愿。
谢谢大家。
从郑老师的分享能够看到，手语无论对听障人士还是健听人都十分重要，国家也意识到这个问题，并颁布了相应的法律条款。深圳市特区的条例往年 9 月 1 日刚刚施行的，还有 10 月 1 日北京市的条例、10 月 22 日广电总局公布了“十四五”的布局，都在推动和激励应用手语。
咱们总结了三点国家法律条款。
第一，在党和国家以及中央重大流动中安顿国家通用手语翻译。
第二，市级以上电视台应踊跃创造条件，播出节目装备手语或者字幕，停办手语栏目，推广和应用国家通用手语。
第三，飞机、铁路、地铁等公共交通应为听力残疾人提供国家通用手语服务。
华为公司做手语服务，并不是从零到一开始做的，咱们在 2018 年跟欧洲聋人协会和世界聋人协会推出了 Storysign 的我的项目，是面向三到六岁的儿童浏览的场景，应用华为手机对着儿童浏览书籍拍摄，能够通过人工智能的技术主动产生手语动画。
在 Storysign 我的项目的根底上，咱们开发了手语服务，不再面向非凡的年龄特殊人群，咱们开发的是面向凋谢人群、凋谢场景、智能手语动作生成的。
手语不仅包含手部动作，还有唇动和面部表情整个的表白，因为手语是一种视觉语言，跟书面语不太一样，有本人的语法，比方“我没有带身份证”，在手语当中不是逐词打的，整个的手语是依照视觉语言，会先打“身份证”“我”“带”“没有”，其次是手语动作是否连贯天然，再就是是否自带面部表情。
华为手语服务次要有三个模块。
第一个模块，首先把语音转成文本，这是在日常生活当中常常应用语音转文字的能力，这是比拟成熟的技术。
第二个模块，从文本转到手语表白，这里有一个手语翻译的关键技术，利用的是华为公司的自研的语言大模型，再联合手语语言学数据做的，咱们跟其余技术不一样的是，咱们有训练大模型，在特定语义环境下训练，所以成果十分好。
第三个模块，文本产生 3D 动作，这是十分难的技术问题，咱们是利用了神经网络多模态的模型实现的。当然这个过程当中，咱们不仅有人工智能算法和数据，还把手语语言学跟手语翻译、手语生成两个模块进行深度交融，输入 3D 的动作，最初通过 3D 虚拟人出现。要驱动 3D 虚拟人，还要通过骨骼静止带动肢体静止，再进行 3D 虚拟人的渲染出现。
以后的语种只反对中国的手语，后续对英文也有布局。对于词汇也是十分重要的，方才郑老师也讲了，国家通用词典 2019 年公布了当前，其实外面收录了 8214 个词汇，然而实际上还有很多词汇并没有输出，咱们跟郑老师一起，把日常生活当中，没有被国家通用词典收录的词进行拓展，以后笼罩了一万多个词汇，当然还会持续减少，预估在明年达到 2 万的词汇，根本能够笼罩 90%-95% 的日常词汇。
如果您想将手语服务使用到您的业务场景当中，也反对 3D 虚拟人定制，比方将穿红衣服的 3D 小姐姐换个造型。
以上介绍的是手语服务的关键技术，那手语服务的能力在什么场景中利用呢？
在 To C 的利用场景中，面向一般消费者，能够升高交换和信息获取难度，实现沟通无障碍。
第一，日常生活。日常生活能够用于比方在家庭、敌人交换的场景。
第二，教育学习。手语也是有口音和中央规范的，国家始终在推广国家通用的手语，而真正懂或者是十分纯熟业余手语的人是非常少的，那么基于国家通用手语规范的华为手语服务，利用于聋人敌人的教育是十分好的。
第三，用于对社会资讯的获取。比方游览资讯、就餐、购物等场景。
手语服务在一些 To B 的场景中也施展了很大作用。比方国家激励或推动在一些行业里进行推广和应用国家通用手语。
第一，广播电视、直播和转播的场景。
第二，在政务、银行、交通等场景应用。
第三，在大型会议、流动直播等场景应用。
手语服务的产品公布，不是咱们的起点，只是咱们的终点。心愿咱们的翻新可能推动整个社会信息无障碍继续的提高。
以上就是我的分享，谢谢。
理解更多详情 >>
拜访华为开发者联盟官网
获取开发领导文档
华为挪动服务开源仓库地址：GitHub、Gitee
关注咱们，第一工夫理解 HMS Core 最新技术资讯~
更多精彩内容，请见华为开发者官方论坛→https://developer.huawei.com/…