指南AI
指南AI

数字人 :如何让“无声世界”看懂冬奥?揭秘手语播报“数字人”

幕言助手 2024-04-30 20:56:48 幕言直播助手 582 ℃ 阿比整蛊源头|厂商微信:gogoh6
正文

封面新闻记者 邵萌

北京冬奥会正如火如荼停止,然而,通过画面、讲解等形式赏识赛事曲播,对听障人群来说却是件困难的事数字人 。据全国第二次残疾人抽样查询拜访数据,中国有超越2700万名残疾性听力障碍人士。若何让“无声世界”淋漓尽致感触感染北京冬奥会的赛事盛况?接纳我国首个超大规模智能信息模子和虚拟数字人手艺,为听障人士打造了“冬奥手语播报数字人”。

若何让“无声世界”看懂冬奥strong/p
p数字人
/strong?揭秘手语播报“数字人”

冬奥手语播报数字人数字人 。受访者供图

封面新闻记者留意到,大屏幕上,一位身着红色西拆,扎着丸子头的女性数字人手指翻飞,按照主持人的语音将冬奥赛事同步播报数字人 。

据悉,“冬奥手语播报数字人”系统基于“悟道2.0”大规模智能模子,由北京市科委、中关村管委会撑持,智谱AI、凌云光和北京播送电视台结合打造数字人 。智谱AI高级副总裁左家平暗示,“悟道2.0”类似于一个存储了1.75万亿条常识的大脑。基于那个虚拟数字型的大脑,研发出了我国首个原创虚拟学生“华智冰”,在此根底上,又打造出“冬奥手语播报数字人”。

左家平称,“冬奥手语播报数字人”系统完成了《国度通用手语词典》收录的8214条通用手语的收罗和录造,而且语法都以听障群体习惯打法为准,以确保更好地办事听障人群数字人 。因为当前国内贫乏较完美的手语语料数据,研发人员邀请超越40余位聋人教师及手语专家停止手语文本转写和手艺指点,并停止大范畴听障群体评测,最末构建了契合国度通用手语标准的国内更大规模多模态手语语料库,词汇及语句总规模超10万。

若何让“无声世界”看懂冬奥strong/p
p数字人
/strong?揭秘手语播报“数字人”

多模态动做捕获数据收罗现场数字人 。受访者供图

除了丰硕的语料库之外,若何让手语速度在跟得上播报速度的同时,实现高精度、高天然度的手语动做姿势是一大问题数字人 。冬奥手语播报数字人项目手艺负责人杜冀中介绍,系统以超大规模预训练模子为核心手艺,通过语义蒸馏及手语翻译快编模子,实现对新闻播报语音停止精简,并翻译成契合手语习惯的语序。研发团队还自主搭建了多模态肢体动做、脸色、手指同步收罗系统。通过收罗多模态动做捕获数据,运用跨模态拟人生成算法对超写实数字人停止天然、流利的驱动和衬着,实现对文本内容的手语播报。

据悉,除了便利听障人士收看赛事专题报导,手语播报数字人的推广将加速国度通用手语推广落地,鞭策国度通用手语尺度普及数字人 。手艺团队透露,后期该数字人有望在电视台、机场、银行等场景推广,为残疾人平等参与社会生活缔造无障碍情况,让科技更有温度。

【若是您有新闻线索,欢送向我们报料,一经采用有费用酬报数字人 。报料微信存眷:ihxdsb,报料QQ:3386405712】

本文TAG:

指南AI

幕言互游在线咨询

上班时间:9:00-22:00
周六、周日:14:00-22:00
wechat
打开微信扫一扫,加我好友!

无限流量卡免费领取

点击预约
免费领取 先到先得