鱼羊 发自 凹非寺
量子位 | 公家号 QbitAI
什么样的手语主播能跟墨广权battle得有来有回AI智能主播 ？
话不多说AI智能主播 ，咱间接板凳瓜子备齐，一路前排围不雅（手动狗头）：
只见墨广权语速起飞AI智能主播 ，妙语解颐，频出“魔鬼”面试题，但那位手语教师完全没在怕的：
如斯表示，不只面试官墨广权连连夸赞“出色”，网友们也纷繁点赞AI智能主播 。
没错，那位手语主播并不是实人，而是一名来自百度智能云的虚拟数字人AI智能主播 。
如今，她已正式上岗冰雪盛会，将在各类冰雪赛事中，为2780万听障人士供给24小时不连续的手语办事AI智能主播 。
固然是初度上岗，但那位AI手语数字人的专业度不容小觑AI智能主播 。
按照测评，其手语可懂度能到达85%以上，与支流的中英、中日机器翻译成果相差无几AI智能主播 。
究竟结果，“台上一分钟，台下十年功”，为了给听障人士们送上那出色的霎时，AI手语数字人背后的法式员们，已经下了很多苦工AI智能主播 。
手语数字人背后的手艺挑战在聊手艺之前AI智能主播 ，或许你会猎奇如许一个问题，明明有字幕，为啥体育赛事等电视节目还需要手语讲解？
现实上，因为种种现实因素的造约，比起文字，手语对听障人士而言愈加亲热，也能更快速地传递信息AI智能主播 。
因而，屏幕一角的手语翻译，关于特殊人群而言其实是一个“愈加平等享受资讯”的窗口AI智能主播 。
那也就给AI手语数字人提出了一个素质的手艺问题：若何让听障人士能实正看懂数字人打出的手语AI智能主播 ？
乍一看，那就是个从语音到文本，从文本到手语符号，再到手语数字人动做的一个翻译流程，但深究其背后的手艺细节，就会发现需要克制的难点要比外表看上去复杂得多AI智能主播 。
起首，语音转手语，并非简单地构建一个语音到视觉的转换模子就行AI智能主播 。
单就语序而言，手语和天然语言之间就存在较大的差别AI智能主播 。举个例子，“我想回家”如许一句话，用手语打出来的挨次其实是“家 回 我想”。
而且，手语还有语言精简的特征，手语的描述会对白话停止精简AI智能主播 。
也就是说，若是只是生硬地把白话中的词汇转换成手势，再把动做简单地毗连起来，如许打出的手语只能说是“半吊子手语”，听障人士很难看懂AI智能主播 。
其次，脸色神志同样是手语表达中极为重要的部门AI智能主播 。
有时一个手势代表好几个意思，若是没有脸色和口型的共同，就可能产生曲解AI智能主播 。
除此之外，还要考虑数据匮乏、数字人动做灵敏度欠缺等种种问题AI智能主播 。
总而言之，想要打造一个高量量手语数字人，既需要语音、视觉、天然语言处置等AI手艺同时发力，也少不了关于听障人士实在需求的深切调研AI智能主播 。
所以AI智能主播 ，那一次百度智能云的法式员们是若何胜利让AI手语主播具备助力冰雪盛会的实力的？
2个月，“做难而准确的事”研发团队接到手语数字人使命时，间隔万寡等待的冰雪盛会已仅剩不到2个月的时间AI智能主播 。
但就是在那种几乎没有时间试错的情况下，法式员们却放弃了现成的手势汉语语料AI智能主播 。
正如前文所言，汉语到手势的简单转换在良多情况下会让听障不雅寡产心理解歧义，现实效果其实是大打折扣的AI智能主播 。
为了“治标”AI智能主播 ，虽然面对数据需要从头收罗标注、额外增加的成本难以预估的压力，百度智能云团队仍是判断选择了天然手语语料：
做就做难而准确的事AI智能主播 。
为此，百度智能云团队结合天津理工大学，组织了上百位听障学生做语料的数据标注，同时邀请手语委专家、特殊教育专家等专业人士，将大量行业常识交融到模子效果和听障人群的体验傍边AI智能主播 。
打下了高量量的根底，接下来，就是一步步处理手语数字人“听得清”、“会翻译”、“会表达”三个问题AI智能主播 。
“听得清”，要靠语音识别模子AI智能主播 。
ASR语音识别方面，在NLP、语音范畴有着逾10年积累的百度自己已具备成熟的处理计划，识别准确率能到达98%以上，还能hold住中英文稠浊、生僻字、方言等特殊场景AI智能主播 。
“会翻译”，用上的就是手语翻译模子AI智能主播 。
与一般的语言翻译模子差别，因为前文提到的手语表达中语言精简等特征，手语翻译模子需要着重考虑精准度和精简度AI智能主播 。
此中精准度影响到数字人手势的精准，而精简度会影响传递信息的及时性AI智能主播 。
在高量量数据资本和百度多年积累的神经收集翻译手艺的根底上，研发团队设想了从中文文本到手语符号的翻译办法AI智能主播 。
通过大规模常识进修、中间件控造等手段，研发团队胜利在保障翻译准确率的情况下缩减了译文长度，实现了翻译效果和时延的平衡AI智能主播 。
2个月的时间里，颠末6次大的版本迭代，那一手语翻译模子可懂度最末到达了85%以上，媲美支流的中英、中日等标的目的的机器翻译成果，到达了业界领先程度AI智能主播 。
最初，数字人的表达靠的是动做生成模子，包罗手势、口型、脸色的生成AI智能主播 。
针敌手势问题，研发团队运用人体动做视觉识别手艺，让AI进修手语视频，将此中的二维骨骼点转化为驱动三维数字人的手语动做，而且可以切确到每一根手指AI智能主播 。
基于此，百度智能云已经成立起拥有近1万个手语动做的强大动做库AI智能主播 。
而在口型和脸色方面，研发团队运用初创的4D扫描数据停止训练，对脸色和口型停止精准校正，通过超10万个全身多边形面、超1万个脸部面、超240个面部脸色行变基、超100个身体骨骼边界，付与了手语数字人天然生动的脸色AI智能主播 。
wink、吹泡泡都不在话下：
总体上，口型生成的准确度可以超越98.5%AI智能主播 。
“降低成本是虚拟数字人开展的关键”说到那里，想必你也看出来了，百度智能云的法式员们可以斗胆挑战更有难度的手艺道路，与百度自己持久积累的AI手艺、数字人手艺不无关系AI智能主播 。
现实上，在数字人的消费上，百度已经把上述人像驱动手艺、智能对话手艺、语音交互手艺，以及智能保举手艺汇总到了其平台级产物——百度智能云曦灵平台上AI智能主播 。
百度智能云曦灵集数字人消费、内容创做、营业设置装备摆设办事为一体，无论是虚拟员工如许的办事型数字人，仍是虚拟主持人、虚拟偶像如许的演艺型数字人，都能基于该平台一站式打造，以至是“一句话生成”AI智能主播 。
此前与马斯克妈妈梅耶·马斯克对话的百度集团数字人“希加加”：
可以抚琴献唱的“龚俊数字人”：
就都是基于百度智能云曦灵打造AI智能主播 。
目前，百度智能云曦灵平台已经推出了3D写实、2D写实、3D卡通三条消费线，实现了银行/保险、运营商、媒体/广电、互娱/品牌商、MCN/艺人经纪等全场景笼盖，一站式打造“能听、能说、能理解、可互动”的数字人AI智能主播 。
那就大大加速了一个数字人从设想到落地的流程，有效降低了数字人消费的成本，为数字人的规模化应用打下了根底AI智能主播 。
百度集团副总裁吴甜在参与央视《对话》节目次造时还谈到如许的概念：
降低成本是虚拟数字人开展的关键之一AI智能主播 。
百度希望通过领先的全栈AI才能，把虚拟人的消费周期缩短到小时级别，降低消费成本，并驱动生成内容AI智能主播 。
科技让世界更公允严酷说起来，数字人其实不算是全新的事物AI智能主播 。
在过去几年中，跟着AI等手艺的成熟，以及短视频、曲播等新兴前言需求的涌现，数字人正不竭涌现出新的面孔和新的应用形式AI智能主播 。
而从被提出到今天的普遍落地，“数字人”那一科技热词，其实也已履历了好几个认知阶段AI智能主播 。
第一阶段，各人切磋的重点是数字人“实不实”，那是新手艺之初见AI智能主播 。
当手艺落地的测验考试起头展开，第二阶段围绕“危机感”的讨论便随之而来：人们起头存眷数字人能否会侵犯掉人类的工做时机AI智能主播 。
如今，或许我们对数字人的认知，又到了进入新阶段的时候AI智能主播 。
正如AI手语数字人让冰雪赛事的魅力触到达了更多人群，越来越多的落地案例正在申明，数字人做为一种提拔办事效率的体例，并不是在“替代”人类工做，而是在填补人力所不克不及及的空白AI智能主播 。
那也恰是科技背后实正的价值——并不是取而代之，而是帮忙人、做人所不克不及之事AI智能主播 。
而当百度如许的科技企业，努力于降低手艺的成本、加速手艺的落地，表现出的亦恰是科技工做者的社会责任担任AI智能主播 。
从那个角度来讲，前沿手艺仿佛不再冰凉和遥远，而是实正在让人类配合体变得愈加公允和美妙AI智能主播 。
你觉得呢AI智能主播 ？
— 完 —
量子位 QbitAI · 头条号签约
存眷我们AI智能主播 ，第一时间获知前沿科技动态
猜你喜欢
- 2024-05-14AI智能主播 :爱酱为什么自称世界上最聪明的AI？
- 2024-05-13AI智能主播 _AI女主播也上岗了，接下来会是男女联播吗？
- 2024-05-13AI智能主播 _AI主播出现了，怎样获得新技术抢市场分到一杯羹？
- 2024-05-12AI智能主播 _“AI换脸”愈演愈烈，如何才能安心享受技术红利？
- 2024-05-12AI智能主播 :央视AI手语主播首现身！颜值堪比美女记者张扬，网友：搭档朱广权
- 2024-05-12AI智能主播中国首位ai主播
- 热门文章
- 热门标签
在线咨询