让“无声世界”感受赛场魅力!带你看看冬奥手语数字人有哪些奥秘******
2022年2月4日,第24届冬季奥林匹克运动会在北京举行,让世界目光再次聚焦中国。本届北京冬奥会秉持绿色、共享、开放、廉洁的办赛理念,凝聚中国科技力量,面向世界、面向未来,向全球奉献了一场精彩、非凡、卓越的奥运盛会。
本届冬奥会运用最新科技手段,为全世界观众提供了惊艳的现场转播和全方位覆盖报道,北京冬奥会也成一场上科技含量高的奥运会。赛事活动期间,为了让各类人群都能平等地享受本届冬奥盛会,北京电视台上线了智能手语播报数字人,在《北京新闻》和《北京您早》等节目中进行冬奥专题手语播报,为听障人士带来精彩赛事报道。
最新数据显示,我国听障人群超过2700万,这部分人群与健听人一样,他们对教育、社交、娱乐等信息获取都有巨大的需求。但长期以来,传统人工手语翻译工作量大,且主持人和手语主持人配合难度极高。手语动作表情复杂,语序与正常语序差异大,正常情况下想要熟练掌握手语大约需要2年左右的时间,还要结合语境进行猜测。
受北京市科委科技冬奥专班委托,北京电视台联合凌云光、智谱AI等业内科技公司,在北京市残疾人联合会和市残联聋人协会等支持下,用3个多月时间,让手语播报数字人完成了近10万条手语语料学习,且翻译准确率高达90%。
在如此短的时间内实现这项高难度动作,智能手语数字人是如何做到,在这背后又有哪些技术创新难点?
在多位业内人士看来,近年来人工智能体系建设重点布局在算法层和应用层,数据层建设远远不足,并且针对数字人相关产业,底层数据库的数量、质量和开源程度还明显不足。尤其是国内现有的手语语料数据库数量少,且多以图像、视频等二维平面为主,无法满足AI(人工智能)训练的需求。
同时,因手语语序与中文语序差异大,方言分化更加复杂,且需要通过表情、口型、动作等方式来传达信息。除了传统的二维平面图像、视频采集,三维肢体运动、表情信息数据采集及结构化参数表达外,手语语料数据库建设对三维运动信息捕捉也十分重要。
凌云光手语数字人产品相关负责人介绍,在建设高质量手语语料库的同时,他们充分调研了2022北京冬奥专用手语术语,并联合北京市残联、聋人协会等相关组织机构,进行数据标注,建设手语语义映射关系,不仅完善了国内手语数据库的建设,也为手语推广和AI研究留下了宝贵的数据资产。
该负责人举例说,基于“悟道2.0”超大规模人工智能模型的技术支撑,手语数字脑用计算机模仿听障人士的大脑,将看到的中文文本信息转换成手语词汇序列,包括中文语义蒸馏模型和AI手语分词快编算法的研究。中文语义蒸馏模型用于从输入的文稿或文本中提取出关键的语义信息,将中文文本语义提炼和精简,形成精准匹配适合手语表达的文本;AI手语分词快编算法则用于将蒸馏得到的中文文本,根据冬奥手语语料库划分成相应的手语词汇序列,供数字人做表达输入。
该负责人还提到,数字人是冬奥手语播报的载体和展现形式,通过高精度写实数字人全流程制作方案,可实现一键数字建模,高度还原真人发肤,重新毛孔等细节,更加真实亲切。同时,通过跨模态拟人生成算法,还可以将手语词汇序列,生成相应的动作信息,驱动数字人模型做出相应的动作、手势和表情。(姚坤森)
上博东馆打造“开放型博物馆”******
在浦东新区花木社区,上海博物馆东馆正拔地而起。
步入场馆内部,与常见的博物馆不同,这里采用了开放式设计,其中多处设计别有洞天。
据了解,上博东馆预计今年年底开门迎接参观者。
“不像传统博物馆”
上博东馆建筑高度近45米,地上6层包括展示陈列、公众服务、库房及办公用房;地下2层则主要为学术报告厅、影院、活动教室等。
许多人印象中的博物馆,一般都采取了封闭式设计,大量采用人工照明,光线昏暗,而且空调温度偏低。据业内人士透露,其中重要原因是要确保文物安全。一些参观者趣言,“走进博物馆,就像走进尘封的历史”。
但许多经过上博东馆的人,对这一建筑的第一印象是“不像传统博物馆”。据介绍,外立面蜿蜒起伏的曲线,在设计上暗合上海这座城市“海陆交汇”的地理位置,也象征“勇立潮头”的精神。建筑内部设计与功能组织,也一改常见的博物馆封闭式流线设计,与城市空间有了更紧密的联系,力图为市民带来一座“开放型博物馆”。
走进上博东馆一楼连廊区域,顶部是一个174平方米的椭圆形玻璃穹顶,40米挑高的大厅,顶部玻璃穹顶达632平方米,建筑四面都设置了一定高度的玻璃幕墙,还有敞开式空间与外界连通,阳光能从四面八方透进博物馆内。上海博物馆馆长褚晓波表示,“我们在符合文物保护要求的前提下,希望有自然光透进来,这样观众在博物馆里参观会有多样性的感受。”
上博东馆西临杨高南路、北至世纪大道、东面是丁香路,与上海科技馆、东方艺术中心隔街相望。观众在博物馆里,不再仅仅是“进入尘封的历史”,也能从不同角度远眺城市景观、感受城市的脉动,让历史与当代生活交流共鸣。
据悉,由于建造年代等原因,上博人民广场馆没有设计专用通道,文物运输一般在晚上。而上博东馆将设置员工、文物专用通道,与观众通道分开,在不打扰观众参观的情况下大大提高文物运输的安全性。据透露,过去布展时曾发生过的拆门以搬运大体量文物的情形将成为历史。
多处设计“别有洞天”
一些途经上博东馆的市民发现,透过长方形外立面镂空的开放空间,能看到中间环绕而上的坡道。
据了解,这其实是一种传承。1996年开放的上博人民广场馆,建筑造型一大亮点是方形基座上托起圆柱形顶部,取“天圆地方”之意。而东馆的建筑主体呈矩形体块,中间嵌入圆形的旋转坡道,也是方和圆的结合。
东馆中间这一旋转坡道,其实是三楼通向五楼的休闲步道,开放后,这一巨型的旋转坡道很可能会成为上海新晋“网红打卡点”。
在靠近旋转坡道的区域,开放度更高,未来将开设一个针对少年儿童的探索宫。据透露,不同于一般的文物展厅,上博将在探索宫里融入“探索”理念,推出将人文、艺术、文明等内容结合在一起的项目,帮助少年儿童学习知识、拓展眼界、丰富体验,启发他们的探究性思维。
占地数千平方米的五楼露天区域则将复制仿造一组江南园林建筑,也是室内展厅向室外的延伸。观众在四楼展厅参观完江南文化主题展,可以步行至五楼,在园林的亭台楼阁之间眺望周围的城市脉动。上博颇受欢迎的“博物馆奇妙夜”活动,今后也将安排在这里举行。
上海博物馆前任馆长杨志刚曾透露过一段趣事:他在医院看病时,医生看到其病历卡上显示单位是上海博物馆,于是跟他说,“第一次谈朋友的地方就在你们上博。”
这让杨志刚感慨,未来观众除了参观展览,还能在博物馆空间里享受休闲、社交、餐饮等更多体验,“博物馆的功能应该是复合的,这就要求在建筑的布局、空间的营造里把它们充分考虑进去,让观众喜欢来且愿意经常来。”
“发掘呈现上海的文化”
据了解,上博东馆有大小展厅20余个,还设有大量教育体验场地,展示陈列区面积达3.36万平方米,预期每年观众接待量达500万人次。
据褚晓波介绍,上海博物馆以打造“世界顶级的中国古代艺术博物馆”为发展目标,上博东馆的建设也将坚持这一定位。未来将在上博东馆构建起以中国古代文化主题为核心的展陈体系,以常设展为主,为观众呈现海内外体系完整、脉络清晰、史料翔实、叙事生动的中国古代艺术通史陈列,以及海派与江南文化、中外文化交流、互动体验四大系列。其中,青铜馆、书法馆、绘画馆、印章馆是海内外唯一的常设通史陈列场馆。
“上海博物馆虽然是一个面向全球的博物馆,但是它既然扎根本土、位于上海,我们理应发掘呈现上海的文化。”褚晓波表示,未来在上博东馆举办的许多展览并不是按照文物材质来展示,而是按照主题来演绎,常设主题中的展品内容、角度会定期调整。(简工博)