2016年被业界称为VR元年,从Facebook的Oculus到HTC的Vive,层出不穷的VR设备和VR内容让用户逐渐体验到了VR的魅力。随着5G、云、AI等技术的不断突破,VR视频、VR直播已从赛事、展会延伸到电商、教育、影视等行业,VR产业迎来前所未有的发展。IDC最新发布的《IDC全球增强与虚拟现实支出指南》预测,到2023年,中国AR/VR市场支出规模将达到652.1亿美元,较2019年的预测(65.3亿美元)有显著增长。然而,在视频向高清、超高清发展的趋势下,VR视频行业仍面对码率大、带宽成本高,视频卡顿,延迟大,内容匮乏等痛点。
近日,在第二十届虚拟现实大会上(ChinaVR2020),金山云高级研发总监樊鸿飞针对以上难点,重点介绍了金山云在VR直播和超高清方面的整体解决方案和技术实力。
沉浸式VR直播金山云提供完整解决方案
“沉浸式技术要实现大规模商用,需解决三大难题:VR内容、硬件设备、变现与生态,其中VR内容对技术要求很高。”樊鸿飞介绍道,通过集智高清、FOV编码、金山云魔镜平台、低延迟直播等技术和服务,金山云在VR内容层面可提供高品质、低成本的整体解决方案。
基于自身CDN分发平台,金山云提供VR视频从采集到播放的完整端到端一体化解决方案,支持VR视频拼接、云端实时转码,为用户提供超高清、低延时、不眩晕的VR新体验。目前,金山云VR直播解决方案已在某秀场直播平台实现落地。
金山云集智高清、KSC265、VR分块传输方案保证在画质前提不变的情况下,相比普通VR视频可降低75%码率,大幅降低带宽成本。在VR直播方案中,通过精巧的算法设计以及强大的边缘计算能力,保证视角切换时用户能及时无感知地切换到高清Tile。金山云VR分块传输方案稳定的云端编码技术,还能有效控制新旧视角切换数据延时维持在30ms-60ms以内,有效消除晕动现象。
“此外,金山云VR直播解决方案支持iOS/Android手机、平板、头盔等多种头显播放设备。同时,金山云VRSDK支持一键接入、HLS形式直播/点播业务以及多种开放接口定制开发,方便用户多终端实时享受。”樊鸿飞表示。
AI集智高清提升VR视频画质的利器
在视频行业高速发展的过程中,用户的痛点也在发生变化:首先是用户终端的变化,从电视、PC、Pad到手机,再回旋发展到大屏、超大屏,且终端的应用也有了极大的丰富;其次,视频的高清体验不断提升,分辨率从1k、4k到8k超高清,在带宽、网络得到极大丰富的5G时代,VR直播中用户对高清画质的需求将更加强烈。
针对这些痛点,金山云推出基于AI技术与传统图像处理技术的解决方案,集合多种视觉AI与编码技术,通过深度神经网络对视频画面内容进行感知,并通过智能调节编码,优化主观体验,追求更佳的人眼视觉感受。
集智高清拥有四大核心优势:1.集智高清处理后视频传输可节省30%-60%带宽;2.相较普通转码,集智高清可明显提升主观效果;3.通过预分析的场景分类和质量评测,匹配更适合的码控,为编码寻找“最优解”;4.集智高清将视频进行分层处理,对视觉显著部分做画质增强。
樊鸿飞表示,金山云集智高清具有的优势离不开其背后的四大核心技术支持。利用超分辨率技术进行画质修复,包括采集端由于编码、采集噪声、投影等带来的噪声;感知编码技术可检测出人眼真正敏感的区域,对边缘部分进行保护的同时,分配码率到更重要的地方;通过关注区域,让VR视频中人眼关注区域的视场角有迹可循,针对不同的Tile进行Multiplexing。根据视频本身的内容特征,以及第一次编码的信息,集智高清能自动决策更匹配的编码参数,用户完全不需要感知编码器设置内容,就已解决调参难题。
金山云魔镜平台高清技术的幕后英雄
视频的高清发展使得用户对视频/图像质量的要求不断提升,其真实体验感受评测难度也相应增加,如何全面客观评价视频画质的质量是否得到提升?“就此而言,金山云魔镜平台可以称得上是高清技术的幕后英雄。因为通过模拟实际的观看体验,金山云魔镜平台真正对‘感知愉悦度’进行评测,并深度解析算法对主观画质的影响,克服AB-test的局限性,不仅能得到‘好不好’,而且能知道‘好在哪’、‘为何好’。”樊鸿飞表示。
金山云魔镜平台能兼容H.264、H.265、AV1编码标准的视频播放,以在线平台的方式提供图像/视频评测服务,无需下载,且根据具体场景提供三种评测模式:专家模式(全参考模式)、用户模式(无参考模式)和细粒度模式(OAA模式)。
除了平台本身提供完整的画质评测流程,金山云魔镜平台还能帮助企业提供全流程画质评测解决方案,包括根据企业使用场景及样本类型筛选评测数据,定制评测维度,提供评测人数建议以及评测报告分析,并提供客观评价指标的自动计算。
通过高效的主观画质验证,金山云魔镜平台能够帮助企业:实现算法原型短期快速验证;算法长期迭代并提供可度量的画质指标;帮助AI保障泛化性,以满足商业化落地需求。
5G、4K/8K、VR等新技术、新应用与云计算和AI正不断深度融合,用户在未来的直播中将可以获得和现场近乎相同的沉浸式体验,这也是金山云视频云前进的方向和终极目标。
相关文章
-
2016天猫双11Buy+购物怎么操作?
不少人把2016年看做VR(VirtualReality,虚拟现实)元年,阿里巴巴作为中国最大的互联网企业之一,自然也不会放过这个“风口”。,6月30日,阿里巴巴在杭州召开2016淘宝造物节启动仪式,同时,为我们带来了Buy+的最新消息。,要知道,只有商家搭建VR商店能像设计网页一样简单,完整的Buy+才有可能真正实现。
2024-03-22 20:47 -
淘宝造物节vr地图采取的是什么技术?
这家公司目前已经获得了谷歌、高通等科技巨头14亿美元的投资,可见其实力。,此次造物节上,Brain透露,新产品将很快上市,是一款轻薄独立的眼镜。,今年造物节,淘宝主市集板块将成为串起所有“惊奇”的不二担当。
2024-03-22 19:14 -
客单价低的宝贝的直通车CVR和ROI如何优化?
但是,自2014年5月份千人千面功能陆续完善后,如何优化直通车?直通车上的宝贝可匹配的流量和精准度更高了。,这时候,店铺的爆款由于受众群体大,定向人群也比较可观,出现了一个流量高峰。,(3)CVR:一段时间后,直通车账户各项指标稳定后,如何优化直通车?流量也不再激增的时候,我们回到了原来的关注点上,继续关注CVR。
2024-03-22 15:43 -
十年之内取代iPhone,押注AR眼镜的苹果要换赛道了?
独立的移动VR设备仍然面临着许多问题:太重、佩戴不舒适、续航时间短等等。,当年,库克在另一次采访中说:“我认为AR技术拥有和智能手机一样大的市场。,拥有独立芯片的意义主要来自三方面:第一是或微信中搜:appleinc2012)。
2024-03-22 09:16 -
Facebook将收购《节奏光剑》开发商 并入Oculus
Oculus表示,此次收购将为BeatGames(之前名为HyperbolicMagnetism)这家小型工作室提供更多开发资源。,目前,该游戏还可以在所有主要的高端VR平台上使用,包括OculusRift和Quest。,Oculus已经资助了很多Rift和Quest独家内容,但是收购跨平台游戏并非其常见策略。
2024-03-22 09:15 -
亚马逊英国快递一般多久到达 亚马逊英国快递查询
亚马逊宣布英国快递公司Evri(原爱马仕)成为其卖家Fulfilled Prime (SFP)的承运人。,”据悉,该测试的一个衡量标准是Evri能否在周一至周五下午4: 30后和周六中午12: 30后的英国内从卖家处领取包裹,然后在第二天将包裹送到收件人(任何地方)。,从今年6月中旬开始,亚马逊将对60英镑以下的订单收取配送费。
2024-03-14 16:50 -
HTC今天发布新品:三款VIVE从入门到高端
CosmosXR本身有结合AR与VR的打算,在Cosmos基础的四镜头之外,另外装了两颗高分辨率透视镜头,官方称能提供100度广角AR体验。,据悉,在CosmosXR上,可以实现周围现实场景与虚拟内容混合之后投射到荧幕上,为VR会议等需求提供了供以满足的工具,主要用户是极客开发者以及企业用户。,CosmosElite适合于对精准度要求极高的游戏,支持Lighthouse激光定位技术。
2024-03-22 08:42 -
Facebook收购VR游戏制作公司Sanzaru Games
该公司将继续在其当前的办公室内独立运营。,Facebook发言人在一封邮件中表示:“我们正在探索多个加速VR发展的方法。,我们相信,在Oculus和Facebook之外开发内容是一件好事情。
2024-03-22 08:39 -
VR看房、直播卖房成新风向 网上卖房是噱头还是趋势?
贝壳研究院数据显示,春节假期后的前两周内,VR带看量以较高增速一路爬升,共计300余万次带看,环比增长超9倍。,计划买房的韩冰最近就在用VR看房,以前,她也注意到一些房屋平台上有这个功能,但从未点开过。,未来,这股风潮会持续多久?姜国君认为,疫情结束以后,尝到甜头的开发商自然还会延续线上营销业务,VR看房也将更受重视。
2024-03-22 08:38 -
网上卖房,噱头?
贝壳研究院数据显示,春节假期后的前两周内,VR带看量以较高增速一路爬升,共计300余万次带看,环比增长超9倍。,计划买房的韩冰最近就在用VR看房,以前,她也注意到一些房屋平台上有这个功能,但从未点开过。,未来,这股风潮会持续多久?姜国君认为,疫情结束以后,尝到甜头的开发商自然还会延续线上营销业务,VR看房也将更受重视。
2024-03-22 08:35
热门标签
-
李荣浩汪苏泷陈立农挑战拍MV《美好的时光》音频即将上线酷狗
2024-03-21 21:44
-
淘宝新店如何运营?老店如何做的更好?
2024-03-21 21:44
-
金山云与连江县达成战略合作 共绘海洋经济新图景
2024-03-21 21:44
-
抖音橱窗押金500怎么退?抖音没有1000粉丝怎么开橱窗?
2024-03-21 21:44
-
被低估的嘀嗒出行:智慧交通的隐形冠军
2024-03-21 21:44
-
全球领先技术铸就行业传奇 HID Global持续引领行业发展
2024-03-21 21:44
-
双节福利:艾媒报告中心年卡全年最低价,用数据助力企业科学决策
2024-03-21 21:44
-
淘宝店铺中差评会对店铺权重产生影响吗
2024-03-21 21:44
-
淘宝企业店铺可以开几个店?怎么入驻?
2024-03-21 21:44
-
小狸AI课助力孩子启蒙教育,三大课程为未来打好基础
2024-03-21 21:44
-
拥抱数字经济 做“金山云感知城市”优质合伙人
2024-03-21 21:44
-
远见者稳进 | FBEC2020暨第五届金陀螺奖,报名参评开启!
2024-03-21 21:44
-
淘宝商家如何合理处理滞销宝贝不亏本?
2024-03-21 21:44
-
如何开通抖音极速退款?退款条件是什么?
2024-03-21 21:44
-
从服贸会近百场直播,解析低延迟直播背后的编码技术
2024-03-21 21:44
-
LG 中国召回 OLED 电视机 涉及 9434 台
2024-03-21 21:44
-
淘宝商家如何布局店铺标签才能使流量来源最大?
2024-03-21 21:44
-
Shopee将季度执行本地化履约退出机制公告
2024-03-21 21:44
-
华为全联接2020进行中,软通动力分享数字化转型方法论
2024-03-21 21:44
-
智领未来、技术开道,北京现代新产品、新技术描绘未来出行新蓝图
2024-03-21 21:44