让“无声世界”感受赛场魅力!带你看看冬奥手语数字人有哪些奥秘******
2022年2月4日,第24届冬季奥林匹克运动会在北京举行,让世界目光再次聚焦中国。本届北京冬奥会秉持绿色、共享、开放、廉洁的办赛理念,凝聚中国科技力量,面向世界、面向未来,向全球奉献了一场精彩、非凡、卓越的奥运盛会。
本届冬奥会运用最新科技手段,为全世界观众提供了惊艳的现场转播和全方位覆盖报道,北京冬奥会也成一场上科技含量高的奥运会。赛事活动期间,为了让各类人群都能平等地享受本届冬奥盛会,北京电视台上线了智能手语播报数字人,在《北京新闻》和《北京您早》等节目中进行冬奥专题手语播报,为听障人士带来精彩赛事报道。
最新数据显示,我国听障人群超过2700万,这部分人群与健听人一样,他们对教育、社交、娱乐等信息获取都有巨大的需求。但长期以来,传统人工手语翻译工作量大,且主持人和手语主持人配合难度极高。手语动作表情复杂,语序与正常语序差异大,正常情况下想要熟练掌握手语大约需要2年左右的时间,还要结合语境进行猜测。
受北京市科委科技冬奥专班委托,北京电视台联合凌云光、智谱AI等业内科技公司,在北京市残疾人联合会和市残联聋人协会等支持下,用3个多月时间,让手语播报数字人完成了近10万条手语语料学习,且翻译准确率高达90%。
在如此短的时间内实现这项高难度动作,智能手语数字人是如何做到,在这背后又有哪些技术创新难点?
在多位业内人士看来,近年来人工智能体系建设重点布局在算法层和应用层,数据层建设远远不足,并且针对数字人相关产业,底层数据库的数量、质量和开源程度还明显不足。尤其是国内现有的手语语料数据库数量少,且多以图像、视频等二维平面为主,无法满足AI(人工智能)训练的需求。
同时,因手语语序与中文语序差异大,方言分化更加复杂,且需要通过表情、口型、动作等方式来传达信息。除了传统的二维平面图像、视频采集,三维肢体运动、表情信息数据采集及结构化参数表达外,手语语料数据库建设对三维运动信息捕捉也十分重要。
凌云光手语数字人产品相关负责人介绍,在建设高质量手语语料库的同时,他们充分调研了2022北京冬奥专用手语术语,并联合北京市残联、聋人协会等相关组织机构,进行数据标注,建设手语语义映射关系,不仅完善了国内手语数据库的建设,也为手语推广和AI研究留下了宝贵的数据资产。
该负责人举例说,基于“悟道2.0”超大规模人工智能模型的技术支撑,手语数字脑用计算机模仿听障人士的大脑,将看到的中文文本信息转换成手语词汇序列,包括中文语义蒸馏模型和AI手语分词快编算法的研究。中文语义蒸馏模型用于从输入的文稿或文本中提取出关键的语义信息,将中文文本语义提炼和精简,形成精准匹配适合手语表达的文本;AI手语分词快编算法则用于将蒸馏得到的中文文本,根据冬奥手语语料库划分成相应的手语词汇序列,供数字人做表达输入。
该负责人还提到,数字人是冬奥手语播报的载体和展现形式,通过高精度写实数字人全流程制作方案,可实现一键数字建模,高度还原真人发肤,重新毛孔等细节,更加真实亲切。同时,通过跨模态拟人生成算法,还可以将手语词汇序列,生成相应的动作信息,驱动数字人模型做出相应的动作、手势和表情。(姚坤森)
17.77亿终端用户开启万物互联新阶段******
17.77亿户——这是截至2022年10月末三家基础电信企业的蜂窝物联网终端用户数量,比上年末净增3.79亿户。中国信息通信研究院预计,到2030年,我国移动物联网连接数将达到百亿级规模。快速增长的数据背后,是移动物联网相关创新应用的不断涌现。工业互联、智慧农业、远程抄表、智能家居、共享设备……移动物联网与千行百业加速创新融合规模发展,深刻改变着生产和生活方式,赋能行业新应用、激活经济新动能。
在福建泉州金鸡水厂,员工沈培坤一天的工作是从早上查看手机开始的。“你看,手机应用显示,现在的出厂水浊度达到了优质级别。”沈培坤一边展示实时数据,一边对记者说,如果设备损坏或者水质异常,通过中控大屏或手机应用就能看到,异常的高温、震动情况还有及时预警。
“过去每天不停在设备机房间奔走,一身水一身泥。”沈培坤告诉记者,现在水厂关键设备实现在“云”运转和互通互联,智能传感器结合AI算法,可以进行自动采集数据、远程抄表、远程控阀等多种功能,高效识别设备运行异常情况。“智能化改造前,水厂需要约60名一线工人,现在仅靠两个人在中控室就可实现对全厂众多工艺的管理控制,全厂也只需要4个班组共8个人的一线操作员。”
保持高效稳定运行只是第一步。水厂调度中心主任谢晓华介绍,从终端设备采集回来的数据,依靠百度智能云提供的AI用水量预测模型,可以进一步实现节能降耗和用水体验提升。“以水压为例,过去自来水公司只能通过收集客户投诉意见来判断水压设置是否合理,现在可以用数据模型指导工作人员主动调整压力。”
不止智慧水务,移动物联网的创新应用遍布各个领域。在重庆市大足区黑山羊国家级保种场,每只黑山羊耳朵都戴着一个“电子身份证”——5G智能电子耳标。通过这个“电子身份证”,数据接入“5G黑山羊智慧养殖平台”,工作人员可以准确掌握分析羊群养殖存栏量、育种繁殖指标、羊群生长状况。在济南,通过智慧燃气管理平台,工作人员可以实时查看管理全市近50万块物联网燃气表,远程抄表、在线充值等让燃气管理使用更便捷。
“移动物联网与千行百业加速创新融合,使数据产生价值,赋能经济社会各个领域,促进数字化转型升级。”中国信息通信研究院院长余晓晖介绍,目前窄带物联网已形成水表、气表、烟感、追踪类4个千万级应用,白色家电、路灯、停车、农业等7个百万级应用,电视机机顶盒、垃圾桶、冷链、模具管理等多领域新兴应用。5G在工业互联网、车联网、物流、采矿等领域加快物联网应用场景探索和落地,已覆盖国民经济40个大类。
2022年,我国移动物联网迎来全面发展重要节点。工信部数据显示,代表“物”连接的移动物联网终端用户数于2022年8月末首次超出代表“人”连接的移动电话用户数之后,“物超人”这一趋势持续延续。截至10月末,三家基础电信企业发展蜂窝物联网终端用户已达17.77亿户,已超移动电话用户数9482万户。
中国工程院院士邬贺铨认为,过去,互联网和移动互联网的发展主要依靠人口红利;如今,物联网应用打开了另一个维度,工业互联网、智慧城市、智慧家居等应用将实现爆发式增长,网络技术发展开启新的里程碑。
“移动物联网深度融入经济社会发展各领域多环节的同时,国内企业技术及产品研发能力持续增强,生态体系不断完善。”余晓晖说,我国移动物联网在连接规模和“物超人”比例上远远高于世界主要发达国家,自2015年以来,我国一直是全球移动物联网技术创新的主要贡献者。生态建设方面,我国移动物联网产业规模不断壮大,产业供给能力显著提升,芯片、模组、终端出货量等方面全球领先。
余晓晖表示,随着移动物联网的发展基础和产业体系持续优化完善,移动物联网终端用户数将进一步扩大。
一方面,我国建成全球最大的移动物联网络,实现高中低速协同组网的良好局面,并加快2G/3G物联网业务向4G/5G迁移。另一方面,持续提升移动物联网网络与芯片、模组、平台及行业应用等全产业水平,促进移动物联网应用产业生态全面发展。中国信息通信研究院预计,到2030年,我国移动物联网连接数将达到百亿级规模。
“我国移动物联网将向更广范围、更深程度、更高水平发展方向迈进,从过去的服务人和信息消费,进一步发展到现在的服务千行百业,让‘万物互联’的愿景真正成为现实。”余晓晖说,未来,移动物联网将极大扩展连接的范围与深度,并与感知、边缘计算等技术相结合,推动实现人、机、物的数字化智能化,引领信息通信产业变革的新浪潮,助力数字社会高质量发展,为经济发展增添新动能。(记者郭倩)
(文图:赵筱尘 巫邓炎)