让“无声世界”感受赛场魅力!带你看看冬奥手语数字人有哪些奥秘******
2022年2月4日,第24届冬季奥林匹克运动会在北京举行,让世界目光再次聚焦中国。本届北京冬奥会秉持绿色、共享、开放、廉洁的办赛理念,凝聚中国科技力量,面向世界、面向未来,向全球奉献了一场精彩、非凡、卓越的奥运盛会。
本届冬奥会运用最新科技手段,为全世界观众提供了惊艳的现场转播和全方位覆盖报道,北京冬奥会也成一场上科技含量高的奥运会。赛事活动期间,为了让各类人群都能平等地享受本届冬奥盛会,北京电视台上线了智能手语播报数字人,在《北京新闻》和《北京您早》等节目中进行冬奥专题手语播报,为听障人士带来精彩赛事报道。
最新数据显示,我国听障人群超过2700万,这部分人群与健听人一样,他们对教育、社交、娱乐等信息获取都有巨大的需求。但长期以来,传统人工手语翻译工作量大,且主持人和手语主持人配合难度极高。手语动作表情复杂,语序与正常语序差异大,正常情况下想要熟练掌握手语大约需要2年左右的时间,还要结合语境进行猜测。
受北京市科委科技冬奥专班委托,北京电视台联合凌云光、智谱AI等业内科技公司,在北京市残疾人联合会和市残联聋人协会等支持下,用3个多月时间,让手语播报数字人完成了近10万条手语语料学习,且翻译准确率高达90%。
在如此短的时间内实现这项高难度动作,智能手语数字人是如何做到,在这背后又有哪些技术创新难点?
在多位业内人士看来,近年来人工智能体系建设重点布局在算法层和应用层,数据层建设远远不足,并且针对数字人相关产业,底层数据库的数量、质量和开源程度还明显不足。尤其是国内现有的手语语料数据库数量少,且多以图像、视频等二维平面为主,无法满足AI(人工智能)训练的需求。
同时,因手语语序与中文语序差异大,方言分化更加复杂,且需要通过表情、口型、动作等方式来传达信息。除了传统的二维平面图像、视频采集,三维肢体运动、表情信息数据采集及结构化参数表达外,手语语料数据库建设对三维运动信息捕捉也十分重要。
凌云光手语数字人产品相关负责人介绍,在建设高质量手语语料库的同时,他们充分调研了2022北京冬奥专用手语术语,并联合北京市残联、聋人协会等相关组织机构,进行数据标注,建设手语语义映射关系,不仅完善了国内手语数据库的建设,也为手语推广和AI研究留下了宝贵的数据资产。
该负责人举例说,基于“悟道2.0”超大规模人工智能模型的技术支撑,手语数字脑用计算机模仿听障人士的大脑,将看到的中文文本信息转换成手语词汇序列,包括中文语义蒸馏模型和AI手语分词快编算法的研究。中文语义蒸馏模型用于从输入的文稿或文本中提取出关键的语义信息,将中文文本语义提炼和精简,形成精准匹配适合手语表达的文本;AI手语分词快编算法则用于将蒸馏得到的中文文本,根据冬奥手语语料库划分成相应的手语词汇序列,供数字人做表达输入。
该负责人还提到,数字人是冬奥手语播报的载体和展现形式,通过高精度写实数字人全流程制作方案,可实现一键数字建模,高度还原真人发肤,重新毛孔等细节,更加真实亲切。同时,通过跨模态拟人生成算法,还可以将手语词汇序列,生成相应的动作信息,驱动数字人模型做出相应的动作、手势和表情。(姚坤森)
游目骋怀,仰观宇宙之大******
作者:徐珊珊
近期,在众多粉丝的翘首盼望中,《三体》动画、《阿凡达:水之道》(以下简称《阿凡达2》)等科幻片陆续上映,引发热议。
现实生活中,人类不断探索地球之外的太空奥秘;影视世界里,有关外星球、外星生物、外星景观的影视作品数不胜数,充满了人类对浩瀚宇宙和地外生物的瑰丽想象。
《阿凡达2》海报
动画版《三体》剧照
外星球:蕴藏无限可能
奇幻绚丽的水下景观,千姿百态的海洋生物,震撼人心的海底冒险……《阿凡达2》日前登陆影院,带领观众重返潘多拉星球,探索神秘未知的海底世界。
水之道,连接万物。蔚蓝蕴藏着无限可能,欢迎来到潘多拉星球的全新海域。这个神秘的外星球拥有奇特的地质构造,一座座云雾缭绕的山峰悬于空中。在奇幻风光中,众多奇特的地外生物陆续登场。凭借影片多年来在全球的热度和欢迎度,《阿凡达》里的潘多拉星球,成为光影世界中知名度极高的外星球。13年后,《阿凡达2》继续续写潘多拉星球的传奇,故事背景从热带雨林转向神秘的深海世界。影片精彩的视觉效果获得众多赞誉,有网友评论:“拍得好像去外星取过经。”
去年12月,动画版《三体》上线,该片改编自著名科幻作家刘慈欣同名长篇科幻小说,是三体宇宙这个国内顶级科幻IP的首部影视化作品。这部动画片上映后口碑两极分化,目前豆瓣评分仅为5.0。但是,可以肯定的是,该片又引发了新一轮“三体热”。
除了众所周知的潘多拉星球、三体星系外,还有许多外星球给观众留下深刻印象,包括《星际迷航2:暗黑无界》中的尼比鲁星、《沙丘》中的厄拉科斯星、《大黄蜂》中的赛博坦星、《星际特工:千星之城》中的千星之城阿尔法、《星际迷航3:超越星辰》中的约克城等。
《星球大战》中的科洛桑星球,是片中银河共和国与此后的银河帝国的首都,星球形象很符合许多人对未来世界充满科技感的幻想。在阳光照射下,科洛桑星球犹如一个能反射出奇特银色光芒的金属球体,“科洛桑”这个名字,即有“闪耀之城”之意。整个星球表面被城市景观及四通八达的交通网所覆盖,摩天大楼高耸入云,悬浮车交叉往来绵延不绝。
“厄拉科斯——沙丘——沙漠星球。”在《沙丘》中,人们眼中的外星球就是行星厄拉科斯的模样。这里是人们梦寐以求、竞相抢夺的“香料”的产地,人们常常用另一个名字呼唤这个干旱的星球——沙丘。家破人亡、颠沛流离的少年保罗在这个宇宙间最危险的星球与命运不断抗争。
科幻片中的外星世界,充满了人类对外星球的绚丽想象,也映射出人类对未来命运的探索和忧思。随着科幻片制作水平的不断提升,人们对外星球的想象越来越天马行空,必须借助CG技术(利用计算机技术进行视觉设计和生产)来合成。不过,从许多科幻片中总能看到一些地球上的风景。例如,《阿凡达2》中,高耸入云的潘多拉星球丛林世界在设计时就参考了我国桂林、张家界的地貌。
神奇生物在哪里?
“仰观宇宙之大,俯察品类之盛,所以游目骋怀,足以极视听之娱,信可乐也”,我国著名书法家王羲之在《兰亭集序》中描绘宇宙景观的古文,去年出现在意大利女航天员萨曼萨·克里斯托福雷蒂的社交媒体上,她在发布一组太空摄影作品时配发了上述文字。
从古至今,仰望星空时,人们常常会产生这样一些疑问:地球之外的宇宙世界是什么模样?地球之外的其他星球上,是否有外星人等外星生物存在?
关于外星人的描述,在中外科幻小说、影视作品中层出不穷。在众多影视作品中,哪个外星人给你留下了最深刻的印象?是《阿凡达》中的纳美人,还是《E.T.外星人》中意外走失的小外星人;是《星球大战》中的尤达大师,还是《变形金刚》中的擎天柱?
科幻片中的外星人一般分为以下几种类型:一是入侵地球的怪兽型,通常出现在外星人入侵地球、与人类大战的故事中;二是拯救地球型。在《地球停转之日》(1951)中,外星人来到地球警醒人类关心自己和地球的命运;三是不得不流落到地球的“外星难民”;四是与地球人类友好相处的外星人,小外星人E.T.就是其中的典型代表。
科幻片中,除了外星人外,外星球上还有许多奇特的外星生物。《阿凡达2》里,潘多拉星球上的发光生物令人印象深刻;纳美人乘着掠波翼龙、伊鲁,穿越风暴徜徉在海中;图鲲迁徙的场景配上气势磅礴的音乐,给观众带来震撼的视听感受。这种体型庞大的海洋生物上天入海,让人不由联想起庄子在《逍遥游》中所说的“鲲之大,不知其几千里也”。
科幻片的终极提问
人们常说的“硬科幻”和“软科幻”,主要根据科学技术在科幻片中的“硬核”程度来划分。其中,“硬科幻”指严格遵守数学、物理等科学定律的科幻故事,具有科学的合理性与严密的逻辑性;“软科幻”则不太强调科学的严谨性,有时甚至只是运用一些科技元素对影片故事进行“点缀”。
刘慈欣在科幻小说《三体》中,从恢弘的角度展现了地球文明以外的“三体文明”,并由此引出地球文明在宇宙中的兴衰史。由众多科幻片搭建的奇幻世界中,人们反复探讨人类和地球的命运和未来、外星人与地球人能否共处、地球文明和宇宙文明的相互关系等,同时也展现了剧中角色的复杂和多面,关于权术与背叛、恐惧与仇恨、贪婪和欲望、智慧和勇气、希望与梦想的一幕幕不断上演。在科幻片的外壳下,影片内核不断变化,衍生出众多科幻片亚类型,包括科幻+警匪、科幻+爱情、科幻+悬疑、科幻+喜剧、科幻+战争等。科幻片的形式和内容虽然不断变化,但是经常反复探讨的只有一个终极提问:假如科幻片中的灾难性危机变成现实,人类应该如何应对?
刘慈欣曾提出“大灾难中,拯救人类的唯一力量就是科学技术”等观点。《流浪地球》中,太阳系已经不适合人类生存。面对绝境,人类开启“流浪地球”计划,试图带着地球一起逃离太阳系寻找新家园。在动画版《三体》中,“三体人”的母星即将毁灭,殖民地球是这个遥远文明仅存的希望。为了应对危机,地球上的人类成立了最高指挥系统。该片一开篇就是令人震惊的“古筝行动”。人类在巴拿马运河两侧立起由纳米丝构成的切割网,将“审判日”号邮轮进行切割。
科幻片以人类的科学理论为基础,凸显出强烈的科学精神和忧患意识。科幻对科学的预见性和反思性,启迪人们探索更多星辰大海的奥秘,这道光将持续照亮人类的征途,宇宙探索永无止境……(徐珊珊)
原标题:《三体》动画、《阿凡达2》上映,引发人们对科幻片的热议——游目骋怀,仰观宇宙之大