华为任卿:5G时代,必将崛起超高清视频新物种
11月26日,2020(第二届)智能视听大会在青岛启幕,大会以“新场景、新产业、新经济”为主题,通过举办主题论坛、考察采风、超级发布会、5G科技体验展等精彩纷呈的活动,探索行业未来发展趋势,促进全球智能视听行业
11月26日,2020(第二届)智能视听大会在青岛启幕,大会以“新场景、新产业、新经济”为主题,通过举办主题论坛、考察采风、超级发布会、5G科技体验展等精彩纷呈的活动,探索行业未来发展趋势,促进全球智能视听行业协同创新。期间,举办的超高清视频融合发展论坛暨超高清联盟成立大会上,华为中国区视频产业发展总监任卿分享了关于5G新视听发展趋势以及商业应用前景的思考,任卿指出,5G时代,视频正在实现多维度的升级发展,生产流程正在通过大带宽、云计算和人工智能进行服务解耦及重构,新的视听体验和商业场景正在出现,随着多种技术的融合,必将崛起超高清视频新物种。
华为中国区视频产业发展总监任卿发表主题演讲
任卿表示,自从韩国在2019年打响了全球5G商用第一枪,一年过去了,全球已经部署了110多张5G商用网络。中国运营商已经建起将近70万个5G基站 ,覆盖到了300多个城市,中国大陆的地级行政区基本完成覆盖。5G终端价格在快速下降,一个5G CPE 2018年初是6万,2020年已经下降至2000元以内,最便宜的5G手机已经接近1000元,今年6月开始,新出的手机10个有6个是5G的。另外,在中国5G已经使能20多个行业,创新项目合计超过5000个,在中国,5G已经扎扎实实的来了。
大约每10年,会有一次通信技术的升级换代,每一代都会发展代表性的新业务。比如2G的语音/短信,3G的图片和网页,4G的视频及移动应用。4G下,为什么移动互联网经济会爆发,很重要的因素是,人的数字化,金融的数字化,商品的数字化,物流的数字化,交易平台的数字化,刚好都达到了临界点,并且通过云、网、端进行了打通。5G时代,人的数字化会进一步加深,金融数字化会加速,万物实现互联。无处不在的5G千兆覆盖,意味着流量成本的大幅下降。新基建的普惠型大数据中心,将提供海量的云上算力,意味着计算成本会快速降低。日新月异的人工智能,则意味着单位时间效率的提升。因此信息化生产要素成本在下降,而社会效率在提升,形成了流量红利、连接红利、数据红利、Ai红利的合流,将为各个行业注入新的升级动能。网络里70%跑的是视频,所以视频产业,也是5G时代最先实现赋能的行业。 视频,在5G时代将实现多维度的升级发展,变得更高更快更强。在分辨率上,将从1080P提高到4K、8K甚至12K;沉浸感也会更强,从平面视频到空间视频:从大屏,PC屏,TV屏,手机屏延伸到VR、裸眼3D、全息等空间视频;交互性更快,单方广播到双向交互:从以前模拟信号时代的0交互,到数字信号时代的弱交互,到现在3自由度、6自由度。5G高新视频,是高清到超高清,是平面向沉浸,是单向互动到高交互的升维。
5G赋能高新视频,重构内容生产及消费
任卿指出,5G时代,内容生产方式更加多元,生产流程正在通过大带宽和云计算,进行服务解耦和重构。他举例说,现在做活动直播,完全可以通过华为云采购云导播服务,5
G远程接入后就能实现异地远程导播管理。而现在的云VR拍摄,8K的直播流直接通过5G上云,在云端进行剪辑、缝合、合成,现场再不用好几推车地拉线拉设备,也不用一堆人挤在一个小黑屋里,现场有VR机位和一台笔记本全部搞定。此外,随着Ai能力越来越强,视频审核和转化能力也将越来越强大。上午叶总提到的非常具有启发性,视频+大数据+Ai不仅可以读懂新闻,更能读懂经济,读懂社会。
5G+多屏多视角定义个性化直播
去年12月份华为和国家大剧院合作的5G新视听直播,现场8路4K摄像机同时拍摄,并在屏幕上同时显示1个主画面,3个辅助画面,观众可以自主选择主画面是看指挥的手势,还是钢琴家的指法,还是合唱的画面。在5G时代,直播的主体不仅仅是导演和主播,观众将参与个性化直播。
业界普遍认为CloudVR/AR将是5G的杀手级应用
比起2017年,中国的VR已经取得了长足的进步,那时候的展会大家都是过山车之类的内容,头显笨重分辨率还特差,现在的4K的VR头显已经能做的很轻薄了。入门级的VR是8K起步,码流100M起步,目前VR一体机依然面临着渲染能力不足、容易过热、续航时间短等问题,而实现云化后,将内容放在云端、渲染能力放在云端,通过5G或者千兆转wifi下载,这些问题就能很好的解决。任卿认为VR的某些特性是其他方式无法比拟的,比如VR教育领域,可以通过跟踪眼动情况和注视点集中区域,直接呈现出哪些信息是学生看到的,哪些是学生忽视的,再通过人工智能算出,哪种眼神是真懂了,哪种是装懂的,从而实时反馈出教学的质量。再比如以后相亲,可能先约着一起在线上虚拟包厢里,看场VR电影,听场VR音乐会。系统通过眼神变化,可以算出双方爱好匹配度有多高,然后问你是否付999元开通会员包月,通过算法告诉你,对方是猥琐男还是小清新。另外,目前国内正在开发自己自主创新的3D声场标准,将会VR体验更加沉浸真实。
随着多种技术的融合,超高清领域,必将崛起一批属于5G时代的新物种。
在湖南卫视《舞蹈风暴》节目拍摄中,华为和各方一起研发的,3D立体自由视角拍摄系统。围着舞台定制了巨大的环形拍摄云台,上面部署了124个4K摄像机,在运动过程中,所有镜头对准某一个点,在云端,通过人工智能算法,实时进行画面缝合和视频压缩,从而带来前所未来的精彩画面。这在以前是不可想象的,比如这么大数据流怎么传输,怎么完成实时缝合渲染,怎么让所有镜头在高速运动的同时,自动对准不同的舞者,如何像素级防抖等等,这就是将超高清和5G、云计算、Ai算法融合后,产生的视频新物种。
5G观赛新体验:自由视角/自由缩放,实时全方位观赛
以前大家都认为,视频直播永远不可能超越现场,而现在自由视角+自由缩放的直播,能够带来现场给不了的体验。在球场观众席每个人的座位是固定的,所以再好的位置也有视野盲区。人就算在现场,难免有分神错过精彩瞬间的时候。而通过5G自由缩放+自由视角,可以实时选择球场的位置任意角度观看直播,自由放大比赛细节。在商业上,完全可以把信号卖给不同网络主播,1场比赛就会有N种不同的直播效果以及解说方式,大家可以对最喜欢的解说进行订阅和打赏。甚至可以通过边缘节点,实时在球场内进行零时延的新型直播,让观众席上的人再多掏出来5-10块钱,坐在现场边看比赛边选择不同的角度看直播,或者实时回放错过的瞬间。再比如掏99就可以在线,无死角观看明星的演唱会,再加19可以AR合影,再加29可以留念发朋友圈,或者1999包年某个明星的全部线上5G演唱会等等,不久的未来将出现很多新的商业模式。
5G高新视频不光是用来看的,更可以成为服务
超高清视频远不止娱乐视频,5G和云更大的价值在于服务社会,服务千行百业。疫情期间,华为配合运营商在雷神山和火神山医院72小时建好5G网络,与多家媒体一起进行了5G直播报道。我本人也有幸负责了湖北5G远程CT、5G防护服穿戴监看、5G远程B超、无人运输、病房机器人等19个医疗防护救治方案的策划和实施,最终落地了30多家医院,服务于上万名医患人员。期间有非常多感人的故事,同时也能深刻体会到,5G在疫情中发挥的巨大作用。在宁波智慧港,司机在办公室远程不间断操控吊塔,装载效率提升20%,人力成本可降低50%。在珠峰,通过部署5G,让广大网友可以通过手机“云登顶”。在阳泉煤矿,通过5G对井下500多米的采煤机进行远程控制,减少一半以上的井下工作人员。
在北京坊,华为落地了5G河图AR体验。通过华为手机打开AR地图软件,摄像头直接对着建筑物,就能实时地与云端1:1拍摄的上亿像素的实景图像,进行高精度识别比对,并通过Ai进行毫米级的物体识别及场景理解,并实时在屏幕中叠加数字灯牌、路标、栩栩如生的历史人物等效果。通过设置目的地可以实现实景花瓣导航,尤其在商场、球场、文化广场、博物馆等建筑物内,由于5G室内小站,能够厘米级定位的因素,从而实现更加精准的导航。未来随着AR眼镜的成熟,极有可能每人上街戴一副墨镜大小的AR眼镜,走在同一条街,看到的却是完全不一样的主题风格和推销内容。女孩子看到喜欢的衣服,可以直接比个特定手势,AR眼镜就直接搜到淘宝同款和购买价格,再做个手势或者双击眼镜腿就直接加入购物车。再比如,花19元,选择天气特效包,AR眼镜+算法,想下雨就下雨,想下雪的下雪,到处一起鹅毛飘飘,白雪皑皑。商家也可以定制AR特效彩漂,横幅,或者点击优惠券自动唤醒位置导航,或者发布奖励任务待够多长时间得奖励。或者个人发起现场团购号召,哪款衣服凑够10个人就能打5折等等。
号召产业加强协作,共同迎接新机遇和新挑战
5G新视频的前景是非常广阔的,不过依然面临着不小的挑战,比如内容生产不足,或者说能够拉动用户消费的内容还不够,比如产业标准、商业变现的问题。应对内容的问题,目前因为没内容,所以用户不买单,因为用户不买单,所以没钱投内容,成了先有鸡和先有蛋的问题。任卿建议要通过产业协作、互助,一起努力,分步解决。先构建起托底内容库,比如2D转3D、历史片超高清修复等,再到发展粘性内容,社交类、游戏类、VR、AR短视频等,再到精品内容实现变现,比如赛事直播、电竞直播、AR电商等。另外在关键技术上需要大家共同努力,目前华为联合生态力量发布了视频3.0+,通过5G、千兆、云计算、Ai把产业各方的最优资源和最强能力连接起来,从而创造还原现场,甚至超越现场的视听体验。另外,国家正在加快文化大数据体系建设,璀璨的中华文化,能够为超高清视频带来无群的精彩创意和宝贵素材。华为希望超高清产业与5G、云、AI产业融合起来共同成长,为消费升级、行业创新与数字化转型提供新场景、新要素、新工具,并带来全新的商业成果和社会价值。