让“无声世界”感受赛场魅力!带你看看冬奥手语数字人有哪些奥秘******
2022年2月4日,第24届冬季奥林匹克运动会在北京举行,让世界目光再次聚焦中国。本届北京冬奥会秉持绿色、共享、开放、廉洁的办赛理念,凝聚中国科技力量,面向世界、面向未来,向全球奉献了一场精彩、非凡、卓越的奥运盛会。
本届冬奥会运用最新科技手段,为全世界观众提供了惊艳的现场转播和全方位覆盖报道,北京冬奥会也成一场上科技含量高的奥运会。赛事活动期间,为了让各类人群都能平等地享受本届冬奥盛会,北京电视台上线了智能手语播报数字人,在《北京新闻》和《北京您早》等节目中进行冬奥专题手语播报,为听障人士带来精彩赛事报道。
最新数据显示,我国听障人群超过2700万,这部分人群与健听人一样,他们对教育、社交、娱乐等信息获取都有巨大的需求。但长期以来,传统人工手语翻译工作量大,且主持人和手语主持人配合难度极高。手语动作表情复杂,语序与正常语序差异大,正常情况下想要熟练掌握手语大约需要2年左右的时间,还要结合语境进行猜测。
受北京市科委科技冬奥专班委托,北京电视台联合凌云光、智谱AI等业内科技公司,在北京市残疾人联合会和市残联聋人协会等支持下,用3个多月时间,让手语播报数字人完成了近10万条手语语料学习,且翻译准确率高达90%。
在如此短的时间内实现这项高难度动作,智能手语数字人是如何做到,在这背后又有哪些技术创新难点?
在多位业内人士看来,近年来人工智能体系建设重点布局在算法层和应用层,数据层建设远远不足,并且针对数字人相关产业,底层数据库的数量、质量和开源程度还明显不足。尤其是国内现有的手语语料数据库数量少,且多以图像、视频等二维平面为主,无法满足AI(人工智能)训练的需求。
同时,因手语语序与中文语序差异大,方言分化更加复杂,且需要通过表情、口型、动作等方式来传达信息。除了传统的二维平面图像、视频采集,三维肢体运动、表情信息数据采集及结构化参数表达外,手语语料数据库建设对三维运动信息捕捉也十分重要。
凌云光手语数字人产品相关负责人介绍,在建设高质量手语语料库的同时,他们充分调研了2022北京冬奥专用手语术语,并联合北京市残联、聋人协会等相关组织机构,进行数据标注,建设手语语义映射关系,不仅完善了国内手语数据库的建设,也为手语推广和AI研究留下了宝贵的数据资产。
该负责人举例说,基于“悟道2.0”超大规模人工智能模型的技术支撑,手语数字脑用计算机模仿听障人士的大脑,将看到的中文文本信息转换成手语词汇序列,包括中文语义蒸馏模型和AI手语分词快编算法的研究。中文语义蒸馏模型用于从输入的文稿或文本中提取出关键的语义信息,将中文文本语义提炼和精简,形成精准匹配适合手语表达的文本;AI手语分词快编算法则用于将蒸馏得到的中文文本,根据冬奥手语语料库划分成相应的手语词汇序列,供数字人做表达输入。
该负责人还提到,数字人是冬奥手语播报的载体和展现形式,通过高精度写实数字人全流程制作方案,可实现一键数字建模,高度还原真人发肤,重新毛孔等细节,更加真实亲切。同时,通过跨模态拟人生成算法,还可以将手语词汇序列,生成相应的动作信息,驱动数字人模型做出相应的动作、手势和表情。(姚坤森)
家门口的“中心”多了******
【新春走基层】
光明日报记者 赵秋丽 冯帆 光明日报通讯员 王跃伟
开栏的话
新年新气象,新春再出发。
时盛岁新,放眼神州大地,一个个充满生机活力、日新月异的发展变化,就在你我身边;一个个奋斗创造奇迹、皆得所愿的美好故事,就在眼前。
本报今起开设《新春走基层》专栏,我们的记者跟随新春的脚步,走向田间地头、走进厂矿社区、走到沿海边疆,撷取最鲜活的素材,发掘最真诚的故事,捕捉最美好的情感,记录这个春天里的坚守、团聚、祝福和期盼。
让我们一起,聆听春天的旋律,感受昂扬奋进的时代脉动!
新春将至,山东省寿光市洛城街道屯西村的老年活动中心,呈现别样的冬日“暖”意。活动室里年味儿满满,张贴了各种“兔年”年画、剪纸等作品,村里不少老人在这里的健身室、阅读室、书法教室享受多样文娱活动,传出阵阵笑声。
“只要有空,我就会来这里与老伙计们下下棋、练练太极,累了还可以在按摩椅上放松一下。”活动中心的常客村民傅文山感慨,“没想到老了还能享受到这样丰富的文化服务,很满足。”
傅文山的一席话说出了屯西村村民的心声。这几年,屯西村村民的钱袋子越来越鼓,他们的精神文化需求也随之增加。屯西村村“两委”问需于民,进一步扩容村民活动场所,实现了文化有阵地、娱乐有设施、健身有场所、活动有保障,在精神文化生活方面不断为村民的幸福“加餐”。
屯西村党支部书记葛茂学介绍,2016年开始,屯西村正式开放老年活动中心,配套建设了健身按摩、图书阅览、音乐厅、舞蹈瑜伽、书法影视、棋牌娱乐等12个功能区,为老年人提供休闲、娱乐、健身、学习等全方位服务。除了为社区居民提供文化娱乐活动场所外,村“两委”还定期开展健康知识讲座、文艺演出等公益活动,让活动室真正成为老年人交流、娱乐、健身、活动的好去处。
群众的需求在哪里,村“两委”的服务就跟到哪里。针对群众个性化的文化需求,屯西村重点建设了党群服务中心、青少年服务中心、文体活动中心、老年活动中心、物业管理中心、警务助理协调中心“六大中心”,让群众“进一个门、办所有事、享所有服务”。特别是2000平方米的地下活动中心,让村民连连称赞,他们不仅可以在这里跳广场舞,还可以办婚宴、办会议,环境设施好,一个活动中心,发挥多种用途,最大限度实现了资源共享。
“活动广场建在地下,我们晚上跳广场舞的时候,也不会打扰周围村民休息,各不耽误。”屯西村村民孔令洋说起村里的变化更是滔滔不绝,“现在,我们村民确实得到了实惠,生活有保障,精神面貌也大有改观!”
2021年,屯西村还建起了以汉字演变为主题的艺术馆——仓颉汉字艺术馆,参观者可以通过文物、字典、诗歌等多种形式了解博大精深的汉字演变史。艺术馆还设计了雕版印刷、活字印刷、古法造纸、纸艺作品等体验环节。
“我们用文化丰富心灵、陶冶情操,让大家在充满文化味儿的村里过得更舒心、更开心。未来,我们将进一步探索文化服务群众新模式、新路径,创新管理与服务模式,盘活用好现有资源,让广大村民在家门口得到更多实惠。”葛茂学说。
《光明日报》( 2023年01月06日 01版)
(文图:赵筱尘 巫邓炎)