数字人 :“冬奥手语播报数字人”上岗，将服务听障人士

为听障人士打造的“冬奥手语播报数字人”近日在北京卫视正式上岗数字人 。在电视屏幕左下角，以虚拟学生“华智冰”为外形的数字人手指翻飞，敏捷用手语停止播报。新京报记者得悉，数字人接纳我国首个超大规模智能信息模子和虚拟数字人手艺，它将为听障人士供给手语信息播报办事，使他们收看赛事专题报导时快速获取讯息。

“冬奥手语播报数字人”在《北京您早》节目投入应用数字人 。受访者供图

构建高量量手语语料库数字人 ，词汇语句规模超10万

目前，我国听障人群数量到达2700万，专业场景的手语办事资本匮乏数字人 。与此同时，手语翻译供需缺口大，冬奥专业术语翻译难度大。在北京市科委、中关村管委会的撑持下，智谱AI、凌云光和北京播送电视台结合打造了“冬奥手语播报数字人”。

手语生成涉及多范畴穿插，包罗计算机视觉、天然语言处置、跨媒体计算、人机交互等，面对的挑战庞大数字人 。系统以超大规模预训练模子为核心手艺，自主搭建多模态肢体动做、脸色、手指同步收罗系统，运用跨模态拟人生成算法、超高精度写实数字人等行业领先手艺，实现冬奥期间赛事新闻的专业手语翻译播报。

“我们起首构建了国内更大规模多模态手语语料库数字人 。”智谱AI高级副总裁左家平介绍，“冬奥手语播报数字人”系统完成了《国度通用手语词典》收录的8214条通用手语的收罗和录造，而且语法都以听障群体习惯打法为准，以确保手语播报功效的准确性和专业度，更好地办事听障人群。

因为当前国内贫乏较完美的手语语料数据，研发人员在北京市残疾人结合会和市残联聋人协会的撑持下，邀请超越40余位聋人教师及手语专家停止手语文本转写和动做捕获录造，并停止大范畴听障群体评测，最末构建了高量量的手语语料库，词汇及语句总规模超10万数字人 。“那里不但有体育词汇和冬奥术语，还有新闻播报会用到的各类词汇。”

打造“智能数字脑”数字人 ，播报语音关键信息并转换手语

手语和白话的播报速度差别数字人 。主播停止播报时，一分钟大要能够说两百多个字，手语靠肢体表达，速度比力慢，因而要跟得上播报的速度，需要对播报内容停止摘要，将核心语义表达出来。

“好比主播说今天北京风和日丽、晴空万里，手语播报要和语音同步婚配，就只表达‘今天北京气候好’”数字人 。智谱AI数字人事业部CTO杜冀中说。

他还提到，手语语序和天然语言有所区别，习惯“否认词后置”数字人 。好比“我不快乐”，手语会根据“我”“快乐”“不”的挨次翻译出来。

“冬奥手语播报数字人”若何能参透手语的那些特点？据悉，系统以超大规模预训练模子为核心手艺，通过语义蒸馏及手语翻译快编模子，实现对新闻播报语音停止精简，并翻译成契合手语习惯的语序数字人 。

数字人播报传神天然数字人 ，表达可懂度达90%

数字人停止白话播报，也需要亲热天然，契合审美妙，不克不及让不雅寡产生“生硬”的觉得数字人 。

为实现高精度、高天然度的人物形象和手语动做姿势，研发团队还自主搭建了多模态肢体动做、脸色、手指同步收罗系统数字人 。通过收罗多模态动做捕获数据，运用跨模态拟人生成算法对超写实数字人停止天然、流利的驱动和衬着，算法能够主动对其每段动做捕获数据，为相邻动做之间生成光滑的过渡动做。

左家平说，白话教师停止白话播报时，也会借助口型，让听障人士理解得更清晰数字人 。因而数字人播报时也会有口型的变革。“目前，那套系统只做了九个月，已经可以实现手势和口型的婚配。将来通过进一步研发，数字人还将在脸色上有愈加丰硕的表现。”

目前，“冬奥手语播报数字人”已经实现了“表意的准确性”和“表达的可懂性”数字人 。颠末测评，其表达可懂度已经到达90%。

数字人能7×24小时工做数字人 ，将来或可用于手语教学

“冬奥手语播报数字人”已于冬奥开幕后，每日持续在北京卫视《北京您早》节目中对“冬奥赛事集锦”和“一路看冬奥”停止手语播报数字人 。

后奥运时代，“冬奥手语播报数字人”还将有哪些应用？据悉，数字人能够为新闻媒体供给数字人手语生成办事，便利听障人士快速领会新闻简讯数字人 。同时，数字人能够7×24小时工做，处理手语翻译人员不敷的问题。

北京播送电视台新闻频道中心副主任王毅说，手语比力复杂，中国手语存在“方言”上的差别数字人 。在手语教师紧缺的情况下，若是用人工智能停止尺度版手语播报和教学，会削减误差，加速国度通用手语推广落地，为残疾人平等参与社会生活缔造无障碍情况。他暗示，将来将在更多频道和节目中运用手语播报，便利听障人士获得更多资讯。

左家平暗示，手语播报数字人的形象也不局限于“华智冰”，能够按照利用用户爱好换成其他偶像形象数字人 。

新京报记者 张璐

编纂 樊一婧 校对 李立军