当人们习惯打开手机刷着各种长短视频平台来消磨时间,用各种vlog设备来记录生活点滴时,毋庸置疑,视频已经成为当今获取信息和传播信息的重要方式。
你会如何定义一个极致沉浸的视界?是躺在床上打开天花板的投影仪观看一部高清imax电影?或是戴上vr设备来一次身临其境的丛林冒险?或是在课堂上通过mr亲眼见证一个奇妙的化学反应产生的全过程?……
这些都还不够。
近日,首届中国(北京)国际视听大会在北京举行,在首日召开的“北京新视听年度峰会”主论坛上,金山云高级副总裁、合伙人梁守星在演讲中表示,
预计5g网络下,基于超高清、低时延互动的沉浸式视频业务场景会不断产生和演化,成为视频行业的主力军。
其实,所谓的沉浸式视频产业,并不是一个新鲜事物。
从整个沉浸式视频产业的演变过程来看,2014-2016年处于市场培育期,图像处理能力提升,一时间,vr/ar一度被誉为最值得投资的朝阳产业之一。
2014年3月,facebook宣布以20亿美元收购虚拟现实设备rift vr的制造商oculus,豪赌vr;
2015年1月,微软发布了一款mr头显产品hololens,入局混合现实领域;
不过,vr产业经过了野蛮生长期的市场狂热后,因为难以落地等种种原因,从2017年开始其发展速度逐渐慢了下来,进入低谷;
但一些大厂仍在这个行业继续蓄力,彼时apple推出arkit,google推出arcore;
2018-2021年为全新发展期,沉浸式视频产业逐渐重回热点,游戏、教育等热门应用成熟,例如oculus go发布和magic leap one正式发售等。
同时在今年疫情的影响下,“宅经济”进一步发展,在家上课、在家打游戏的受众群体变得庞大,vr、ar产业重回大众视野。
国际知名数据公司idc在11月17日发文称,全球增强现实和虚拟现实 (ar/vr) 支出预计将从今年的 120 亿美元增长至 2024 年的 728 亿美元。
预计2022年后,随着光学、声学等核心技术突破,以vr、ar、高清、互动等为代表的沉浸式视频产业将进入新的发展机遇期,我们即将要迈入一个沉浸的时代。
那么,沉浸时代到底能给我们的工作、学习和生活带来怎样不一样的体验?
雷锋网就此与金山云高级副总裁、合伙人梁守星进行了对话,梁守星举了一些具体的例子来说明:增强现实让学习氛围更具真实感,混合现实让职业培训实操性更强,肢体识别让互动升级,虚拟现实感觉身临其境......
我们跟很多的ar厂商沟通过,得知很多的操作是通过ar的方式来实现快速学习的。例如,电力维修操作员学习的基础操作,他们可以通过ar去操作一些更精密的器件,带来更好的实景操作效果。
在梁守星看来,5g会催生固网带宽的升级,实时交互式直播可创造真实感的沉浸式直播体验,将成为未来沉浸式发展方向,大流量、高清互动类型的视频,还有vr虚实结合的视频会大量涌现。短视频平台上加入ar、vr元素会促进内容的多元化,ugc、pgc内容制作模式更加繁荣,未来up主、直播带货等视频形式将加入更多的互动和虚实结合的内容。
早在金山云成立之时,雷军就对金山云的“特长生”定位做了清晰的界定。而视频云就是金山云的优势领域之一。
去年,金山云视频云正式提出“向上ai化,向下边缘化”的业务策略。
首先是向上ai化,就是利用ai赋予更多高清的能力,在更低的码率下提供同等质量的画质体验。
其次,是向下边缘化,包括更大的边缘带宽;更加下沉、更接近用户的边缘以及更强算力的边缘计算。在边缘网络上实现用户的快速接入和使用,并且保证不同租户之间在网络上的安全隔离。在算力上,金山云提供容器化、虚拟化等各种使用场景,支持快捷和灵活性的边缘计算部署。
今年,在上述策略下,金山云又提出“智享沉浸视界”的发展目标,将沉浸视频云作为其重点业务方向之一,以高清、vr、互动为核心,在iaas、paas层进行布局。
在iaas层,整合了边缘计算平台、计算存储平台、内容分发加速平台,以及数据处理中心,打造视频云的技术底座。
在paas层,提供超清、vr、互动、ai等多种产品亚博电竞网的解决方案。
人眼对高清的要求是贪婪无止境的,从生物学角度,满足人眼真正的沉浸式需要50k分辨率,沉浸式将对视频的编解码和传输带来巨大挑战。
为了让沉浸式的视频内容可以更快地分享到用户,金山云在算法 ai 编码技术三方面打造智能超高清编解码方案。
梁守星说,金山云早在5年前就开始布局视频云,当大部分企业都还停留在h.264编码技术时,金山云就已经大力投入h.265编码技术,目前比标准的265编码提升将近30%的压缩率。
在编码环节,金山云拥有集智高清、ksc265、kie多组产品。集智高清结合金山云自主研发的ksc265编码方式,可将高清视频码率节省60%,解决了消费者观看卡顿的问题以及视频提供商的带宽成本问题。据了解,金山云可商用版kav1也将于近期发布,相较于 ksc265 的基线水平,能够在保证高清画质的情况下,压缩率继续提升10%-20%。
在传输环节,金山云vr fov传输方案能将原始视频切块,分别进行编码、分配不同的码率,在大幅降低视频传输码率的同时,将视角切换延迟可控制在30-60ms内,有效消除晕动。
梁守星表示,vr头显设备视频大部分实现1080p以上的支持,传统的编码模式主要是对硬件解码的支撑和编码方式的升级,设备解码温度偏高。头部转向中涉及大量的视频信息传输,金山云tile方案解码功耗低,分块编码带宽更小,码率节省75%。tile方案的挑战在于头部转向延迟必须要低,要求很高的边缘计算、视频编码、网络传输能力,对ai、图像处理均带来很大的挑战,而金山云可以通过边缘计算中心以及gpu处理能力快速处理返回超高清的图像。
在分发环节,金山云cdn节点进行专门的大容量设计,在系统架构层面采用新一代自研cache系统,多级缓存、多线程等技术的应用,可大幅提高并发能力。
同时,在ai助力下,金山云视频云可对视频场景进行识别,对体育、秀场、游戏等场景匹配不同的编码模板;通过roi区域检测,捕捉视频画面中人眼视觉焦点,对焦点区域做画质增强,使主体更加突出,背景更加纯净; 检测出人眼真正敏感的区域,对边缘部分进行保护,分配码率到更重要的地方;通过神经网络学习,支持评价多种质量类型,并对不同类型图像质量制定不同优化策略。
ai 超高清编解码,实现更佳的场景识别和优化,对于编码整体的性能,或者编码整体的效果来说都得到了大大的提升。
梁守星表示,智能编码与视频分析为在线视频、泛娱乐直播、短视频、在线教育等行业助力,可有效的减少卡顿率、提高首屏时间,提升画质体验。
在互动方面,金山云当前储备了quic和webrtc能力,据称其边缘计算可以提供低于15毫秒的低延迟接入。同时,金山云支持8k与vr的配合,360度高清视频传输渲染,可以大幅降低延时,提升用户体验。
值得一提的是,当前国内视频行业质量评测尚未有一个明确的标准,因此,金山云开发了魔镜平台产品,提供图片和视频评测服务,可支持 h.265、av1、vr 视频评测,让用户的视频管理和视频评价成体系化。
据了解,目前金山云服务80%以上的视频头部客户,包括字节跳动、b站、爱奇艺等知名厂商。
idc在今年7月曾发布了一份《中国视频云市场跟踪(2019下半年)》,报告显示,2019年中国视频云市场规模达到46.2亿美元,同比增长46.3%。根据idc预测,到2024年,中国视频云市场规模将超过220亿美元。
其对视频云研究的定义包括两大部分,一部分是覆盖面向视频应用场景的全部公有云、私有云和混合云基础设施(计算、存储、网络)以及视频内容分发网络(cdn),另一部分是在视频云基础设施上部署的云平台、应用亚博电竞网的解决方案。
报告显示,在cdn市场,阿里云、腾讯云、金山云、百度云、七牛云合计占据47.3%份额;在公有云、私有云与混合云基础设施市场中,阿里云、腾讯云、百度云、华为云、金山云合计占据77.5%市场份额。在包含了音视频内容制作、编转码、分析、人工智能等视频云亚博电竞网的解决方案市场中,腾讯云、阿里云、百度云、金山云、华为云位列前五,共同占据64.9%市场份额。
从idc报告中可以得出,在视频云这个垂直领域,金山云已经跻身一线阵营,但阿里云、腾讯云等国内头部云计算厂商均看好视频云,且在持续加码布局,由此来看,视频云领域未来的格局尚未明朗。
第八届中国网络视听大会上最新发布的《5g 8k超高清国产化白皮书》显示,“信息视频化、视频超高清化”成为全球信息产业发展大势,视频产业成为基础设施,视频技术正在从高清到4k/8k超高清演进。
5g高速率、低延迟、大容量的特性,使得视频行业迎来爆炸式增长。“乱花不再渐欲迷人眼”,高清、沉浸、虚拟、互动等技术正在逐渐改变人们的视觉体验。随着4k/8k视频的出现,以及vr/ar的应用,视频不断向着高清化、实时性和互动性迈进,“视频 ”将势不可挡。
但5g尚未完全普及,带宽仍存在一定的限制,视频云的边缘计算的算力还未完全释放,“视频+产业”的发展仍然处于早期阶段,沉浸视频时代真正爆发,预计还有两三年或四五年的窗口期。
金山云此时提出“智享沉浸视界”,布局沉浸式视频云,其实是要在这个“蛰伏期”提前谋篇布局。一边打磨技术,一边积累沉浸式视频客户上云的知名度和口碑,为下一轮视频云技术井喷做造势和铺垫。
梁守星告诉雷锋网,视频云是金山云主要发力的战场,未来金山云也将会在这条主要的赛道上持续加大投入力度。
过去8年,金山云前瞻性地战略布局多个快速增长的垂直行业,例如游戏和视频行业,取得了一定的先发优势。但金山云要想在视频云领域更上一层楼,前路依旧漫长,仍需等待一个沉浸视频云大爆发的时机。
雷锋网
关注云计算、5g、智慧教育赛道,微信号:lijingying0451,业务交流请注明公司 职位。