腾讯AI手语解说亮相冰雪赛事 业务能力堪比真人
发布时间:2022-03-02 14:26:46 所属栏目:大数据 来源:互联网
导读:2022北京的冰雪赛场热闹非凡,相信即使没有看比赛这几天来你也一定被金牌、谷爱凌等热词刷屏了。 而和我们一起在屏幕前关注中国健儿们表现的还有一群处于无声世界中的特殊人群,尽管他们能够看到赛场上的精彩画面,不过对于赛场细节的解说却无法传入耳中。这
2022北京的冰雪赛场热闹非凡,相信即使没有看比赛这几天来你也一定被金牌、谷爱凌等热词刷屏了。 而和我们一起在屏幕前关注中国健儿们表现的还有一群处于无声世界中的特殊人群,尽管他们能够看到赛场上的精彩画面,不过对于赛场细节的解说却无法传入耳中。这些听障人士了解世界、对外沟通主要借助手语,以往我们经常能够看到央视等电视台的新闻节目中伴随的手语播报。而为了提升听障人群的观赛体验,手语解说这次也应运而生。 如你所见,“聆语”有着高度接近真人的面部形象以及肢体动作,这为其塑造了与真人手语翻译无异的亲和力,在手语表达能力上,“聆语”具备以下四大特性: 一是语言翻译准确,能够将健听人语言准确翻译转化为聋哑人所能理解的手语,可懂度可达90% 二是结合了逼真的面部表情唇动,更有助于观众理解语义 三是手语动作连贯自然,除了能够准确表达手语词外,不同的手语词间也能够实现顺畅过渡 在最关键的手语表达上,“聆语”基于《国家通用手语词典》的标准手语,和深度的机器学习训练,以及针对体育、艺术等专业领域的优化补充,目前共掌握约160万词汇和语句。在解说比赛时,会先通过机器翻译将比赛解说的健听人语言低延迟转化为高准确率的手语语言表征,再运用腾讯多模态端到端生成模型,进行联合建模及预测生成高准确率的动作、表情、唇动等序列,实现自然专业且易懂度高的手语效果。 并且“聆语”具备快速学习补充新词热词、根据业务场景快速学习专业用语的能力,像应对本次赛事手语解说就针对体育赛事方面的用语做了定向优化,覆盖了超过15000个相关词汇。 而像“聆语”这样以数智人形象呈现的AI手语翻译出现,正有利于解决上述的两大困难。作为AI产品的“聆语”能够几乎无限制地广泛部署,解决专业手语翻译数量不足的问题;而其基于机器学习的表达能力随着时间推移相比真人也会更为精确可懂。 2021年10月广电总局在《广播电视和网络视听“十四五”科技发展规划》也提到,要推动虚拟主播、动画手语广泛应用于新闻播报、天气预报、综艺科教等节目生产,创新节目形态,提高制播效率和智能化水平。 因此可以预见的是,在国家及相关企业推动下,未来“聆语”及类似的AI手语翻译、手语主播将会被部署运用在体育赛事之外的其它视听节目当中,给予听障人群更友好的观看体验,在大型会议、活动直播、影视作品等方面的运用也有着可期的前景。 (编辑:威海站长网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |