首页 电商 正文

金山云亮相第二十届虚拟现实大会 云+AI带来VR直播新“视”界

2024-03-21 21:44
admin

2016年被业界称为VR元年,从Facebook的Oculus到HTC的Vive,层出不穷的VR设备和VR内容让用户逐渐体验到了VR的魅力。随着5G、云、AI等技术的不断突破,VR视频、VR直播已从赛事、展会延伸到电商、教育、影视等行业,VR产业迎来前所未有的发展。IDC最新发布的《IDC全球增强与虚拟现实支出指南》预测,到2023年,中国AR/VR市场支出规模将达到652.1亿美元,较2019年的预测(65.3亿美元)有显著增长。然而,在视频向高清、超高清发展的趋势下,VR视频行业仍面对码率大、带宽成本高,视频卡顿,延迟大,内容匮乏等痛点。

近日,在第二十届虚拟现实大会上(ChinaVR2020),金山云高级研发总监樊鸿飞针对以上难点,重点介绍了金山云在VR直播和超高清方面的整体解决方案和技术实力。

沉浸式VR直播金山云提供完整解决方案

“沉浸式技术要实现大规模商用,需解决三大难题:VR内容、硬件设备、变现与生态,其中VR内容对技术要求很高。”樊鸿飞介绍道,通过集智高清、FOV编码、金山云魔镜平台、低延迟直播等技术和服务,金山云在VR内容层面可提供高品质、低成本的整体解决方案。

基于自身CDN分发平台,金山云提供VR视频从采集到播放的完整端到端一体化解决方案,支持VR视频拼接、云端实时转码,为用户提供超高清、低延时、不眩晕的VR新体验。目前,金山云VR直播解决方案已在某秀场直播平台实现落地。

金山云集智高清、KSC265、VR分块传输方案保证在画质前提不变的情况下,相比普通VR视频可降低75%码率,大幅降低带宽成本。在VR直播方案中,通过精巧的算法设计以及强大的边缘计算能力,保证视角切换时用户能及时无感知地切换到高清Tile。金山云VR分块传输方案稳定的云端编码技术,还能有效控制新旧视角切换数据延时维持在30ms-60ms以内,有效消除晕动现象。

“此外,金山云VR直播解决方案支持iOS/Android手机、平板、头盔等多种头显播放设备。同时,金山云VRSDK支持一键接入、HLS形式直播/点播业务以及多种开放接口定制开发,方便用户多终端实时享受。”樊鸿飞表示。

AI集智高清提升VR视频画质的利器

在视频行业高速发展的过程中,用户的痛点也在发生变化:首先是用户终端的变化,从电视、PC、Pad到手机,再回旋发展到大屏、超大屏,且终端的应用也有了极大的丰富;其次,视频的高清体验不断提升,分辨率从1k、4k到8k超高清,在带宽、网络得到极大丰富的5G时代,VR直播中用户对高清画质的需求将更加强烈。

针对这些痛点,金山云推出基于AI技术与传统图像处理技术的解决方案,集合多种视觉AI与编码技术,通过深度神经网络对视频画面内容进行感知,并通过智能调节编码,优化主观体验,追求更佳的人眼视觉感受。

集智高清拥有四大核心优势:1.集智高清处理后视频传输可节省30%-60%带宽;2.相较普通转码,集智高清可明显提升主观效果;3.通过预分析的场景分类和质量评测,匹配更适合的码控,为编码寻找“最优解”;4.集智高清将视频进行分层处理,对视觉显著部分做画质增强。

樊鸿飞表示,金山云集智高清具有的优势离不开其背后的四大核心技术支持。利用超分辨率技术进行画质修复,包括采集端由于编码、采集噪声、投影等带来的噪声;感知编码技术可检测出人眼真正敏感的区域,对边缘部分进行保护的同时,分配码率到更重要的地方;通过关注区域,让VR视频中人眼关注区域的视场角有迹可循,针对不同的Tile进行Multiplexing。根据视频本身的内容特征,以及第一次编码的信息,集智高清能自动决策更匹配的编码参数,用户完全不需要感知编码器设置内容,就已解决调参难题。

金山云魔镜平台高清技术的幕后英雄

视频的高清发展使得用户对视频/图像质量的要求不断提升,其真实体验感受评测难度也相应增加,如何全面客观评价视频画质的质量是否得到提升?“就此而言,金山云魔镜平台可以称得上是高清技术的幕后英雄。因为通过模拟实际的观看体验,金山云魔镜平台真正对‘感知愉悦度’进行评测,并深度解析算法对主观画质的影响,克服AB-test的局限性,不仅能得到‘好不好’,而且能知道‘好在哪’、‘为何好’。”樊鸿飞表示。

金山云魔镜平台能兼容H.264、H.265、AV1编码标准的视频播放,以在线平台的方式提供图像/视频评测服务,无需下载,且根据具体场景提供三种评测模式:专家模式(全参考模式)、用户模式(无参考模式)和细粒度模式(OAA模式)。

除了平台本身提供完整的画质评测流程,金山云魔镜平台还能帮助企业提供全流程画质评测解决方案,包括根据企业使用场景及样本类型筛选评测数据,定制评测维度,提供评测人数建议以及评测报告分析,并提供客观评价指标的自动计算。

通过高效的主观画质验证,金山云魔镜平台能够帮助企业:实现算法原型短期快速验证;算法长期迭代并提供可度量的画质指标;帮助AI保障泛化性,以满足商业化落地需求。

5G、4K/8K、VR等新技术、新应用与云计算和AI正不断深度融合,用户在未来的直播中将可以获得和现场近乎相同的沉浸式体验,这也是金山云视频云前进的方向和终极目标。

相关文章

  • 2016天猫双11Buy+购物怎么操作?

    2016天猫双11Buy+购物怎么操作? 不少人把2016年看做VR(VirtualReality,虚拟现实)元年,阿里巴巴作为中国最大的互联网企业之一,自然也不会放过这个“风口”。,6月30日,阿里巴巴在杭州召开2016淘宝造物节启动仪式,同时,为我们带来了Buy+的最新消息。,要知道,只有商家搭建VR商店能像设计网页一样简单,完整的Buy+才有可能真正实现。

    2024-03-22 20:47
  • 淘宝造物节vr地图采取的是什么技术?

    淘宝造物节vr地图采取的是什么技术? 这家公司目前已经获得了谷歌、高通等科技巨头14亿美元的投资,可见其实力。,此次造物节上,Brain透露,新产品将很快上市,是一款轻薄独立的眼镜。,今年造物节,淘宝主市集板块将成为串起所有“惊奇”的不二担当。

    2024-03-22 19:14
  • 客单价低的宝贝的直通车CVR和ROI如何优化?

    客单价低的宝贝的直通车CVR和ROI如何优化? 但是,自2014年5月份千人千面功能陆续完善后,如何优化直通车?直通车上的宝贝可匹配的流量和精准度更高了。,这时候,店铺的爆款由于受众群体大,定向人群也比较可观,出现了一个流量高峰。,(3)CVR:一段时间后,直通车账户各项指标稳定后,如何优化直通车?流量也不再激增的时候,我们回到了原来的关注点上,继续关注CVR。

    2024-03-22 15:43
  • 十年之内取代iPhone,押注AR眼镜的苹果要换赛道了?

    十年之内取代iPhone,押注AR眼镜的苹果要换赛道了? 独立的移动VR设备仍然面临着许多问题:太重、佩戴不舒适、续航时间短等等。,当年,库克在另一次采访中说:“我认为AR技术拥有和智能手机一样大的市场。,拥有独立芯片的意义主要来自三方面:第一是或微信中搜:appleinc2012)。

    2024-03-22 09:16
  • Facebook将收购《节奏光剑》开发商 并入Oculus

    Facebook将收购《节奏光剑》开发商 并入Oculus Oculus表示,此次收购将为BeatGames(之前名为HyperbolicMagnetism)这家小型工作室提供更多开发资源。,目前,该游戏还可以在所有主要的高端VR平台上使用,包括OculusRift和Quest。,Oculus已经资助了很多Rift和Quest独家内容,但是收购跨平台游戏并非其常见策略。

    2024-03-22 09:15
  • 亚马逊英国快递一般多久到达 亚马逊英国快递查询

    亚马逊英国快递一般多久到达 亚马逊英国快递查询 亚马逊宣布英国快递公司Evri(原爱马仕)成为其卖家Fulfilled Prime (SFP)的承运人。,”据悉,该测试的一个衡量标准是Evri能否在周一至周五下午4: 30后和周六中午12: 30后的英国内从卖家处领取包裹,然后在第二天将包裹送到收件人(任何地方)。,从今年6月中旬开始,亚马逊将对60英镑以下的订单收取配送费。

    2024-03-14 16:50
  • HTC今天发布新品:三款VIVE从入门到高端

    HTC今天发布新品:三款VIVE从入门到高端 CosmosXR本身有结合AR与VR的打算,在Cosmos基础的四镜头之外,另外装了两颗高分辨率透视镜头,官方称能提供100度广角AR体验。,据悉,在CosmosXR上,可以实现周围现实场景与虚拟内容混合之后投射到荧幕上,为VR会议等需求提供了供以满足的工具,主要用户是极客开发者以及企业用户。,CosmosElite适合于对精准度要求极高的游戏,支持Lighthouse激光定位技术。

    2024-03-22 08:42
  • Facebook收购VR游戏制作公司Sanzaru Games

    Facebook收购VR游戏制作公司Sanzaru Games 该公司将继续在其当前的办公室内独立运营。,Facebook发言人在一封邮件中表示:“我们正在探索多个加速VR发展的方法。,我们相信,在Oculus和Facebook之外开发内容是一件好事情。

    2024-03-22 08:39
  • VR看房、直播卖房成新风向 网上卖房是噱头还是趋势?

    VR看房、直播卖房成新风向 网上卖房是噱头还是趋势? 贝壳研究院数据显示,春节假期后的前两周内,VR带看量以较高增速一路爬升,共计300余万次带看,环比增长超9倍。,计划买房的韩冰最近就在用VR看房,以前,她也注意到一些房屋平台上有这个功能,但从未点开过。,未来,这股风潮会持续多久?姜国君认为,疫情结束以后,尝到甜头的开发商自然还会延续线上营销业务,VR看房也将更受重视。

    2024-03-22 08:38
  • 网上卖房,噱头?

    网上卖房,噱头? 贝壳研究院数据显示,春节假期后的前两周内,VR带看量以较高增速一路爬升,共计300余万次带看,环比增长超9倍。,计划买房的韩冰最近就在用VR看房,以前,她也注意到一些房屋平台上有这个功能,但从未点开过。,未来,这股风潮会持续多久?姜国君认为,疫情结束以后,尝到甜头的开发商自然还会延续线上营销业务,VR看房也将更受重视。

    2024-03-22 08:35