图为ARM区域市场经理王田
在会议上,ARM区域市场经理王田在现场以“从芯架构,虚拟世界”为题发表演讲,从一个芯片及IP Core的角度出发,谈及ARM如何支撑VR成为现实。
从未来XR产业的发展来看,基于4K乃至8K的多屏编解码能力将成为未来的重点,随着VR直播及8K VR的进一步推进,1Gbps以上的码率也将成为未来关注的重点,同时为满足用户在XR体验时的交互行为,Machine Learning也成为未来必须要解决的重心之一。
王田经理表示,从GPU这块,ARM引领VR的体验,未来的视频一定是基于HDR而不是SDR的内容,Mali将通过其HDR10的运算能力,帮助视频更好地实现HDR色域及帧率上的优化。Mali能够通过DDK拓展,降低延迟,解决带宽延迟的问题,通过AFBC降低更高分辨率所需要的系统带宽。芯片和OEM厂商共同合作,在高端设备上,提供高端体验,Mali的GPU通过软件的方式降低延迟,提供支持无损压缩的模式,加深抗锯齿能力,头显设备对于颗粒感的敏感度,如果存在锯齿状的内容,由于360度全景近眼,整个视频的锯齿就会被放大,影响到体验。
同时,提供多路视频的解码与缓冲能力,提供Foveated Rendering的能力,将中央的图像进行深度4K乃至8K的解码,同时在底层提供一个低分辨率的图层,降低芯片解码的要求。
由于头显设备需要感应人的转动方向,通过视角去捕捉,减少芯片处理的能力,通过ARM大小核能力,通过解码与编码的引擎,需要用专业的解码能力,GPU将图像分成左右两个Buffer,到屏幕显示,通过单眼2K的头显,用户能够获得75帧的视频,获得优质的体验。
其他例如人工智能的技术,一些新的应用,上面赋有很多新的应用,交互,例如人脸识别、手势识别等,可以跑在ARM Mali的GPU上,也可以跑在其他专用的能力上,除了VR的体验以外,如何保障用户更优质的体验也是考虑的方向。
ARM不管是GPU(4K 60帧以上的渲染和加速),现有的Display能够提供VR的加速,系统级解决端到端的延迟,达到10ms左右。ARM的整合解决方案能够为IPTV的VR用户提供最优质的体验,在GPU上,实现4K单线程缓冲,达到60fps的4K。另一线程实现Timewarp,镜头校订以及VR架构,未来将进一步实现8K 60帧的画面。在VPU上支持120帧4K10比特视频解码,DPU支持4K 75~90帧显示输出(单眼2K),部分处理和运算可以在DPU侧实现,未来全面提升120帧8K视频的体验。整个过程按照端到端低于10ms的延迟进行设计,最大限度必须低于20ms。
相关推荐
发展IPTV意义深远IPTV是一种利用宽带网络,以家用电视机或PC作为主要终端,集互联网、多媒体、通信等多种技术于一体,向家庭用户提供包括数字电视在内的多种交互式服务的技术。IPTV利用机顶盒+电视机完成接收视频点播节目、视频广播及网上冲浪等功能。它采用高效的视频压缩技术,使视频流传输带宽在800kbit/s时可以达到接近DVD的收视效果(通常DVD的视频流传输带宽需要3Mbit/s),对今后开展视频类业务如互联网上视频直播、远距离视频点播、节目源制作等来讲,有很强的优势,是一个全新的技术概念。在网络意义上,IPTV提供了一个信息共享的平台,实现媒体提供者和媒体消费者之间的互动。它最大的优势就
IPTV在世界范围内的发展形势越来越喜人,国外许多运营商纷纷加大对IPTV的投资力度,为用户提供更多更好的信息服务。自1999年英国VideoNetworks公司推出IPTV业务以来,国外的许多电信运营商相继进入了IPTV市场。到2003年上半年,全球已有30多家电信运营商推出了IPTV业务。在随后的一年多的时间里,各个地区的主要电信运营商开始加速部署IPTV业务。2004年以前,多数运营商还在进行IPTV的试验,预计今年,IPTV将从试验阶段进入商用。目前,部署IPTV业务的运营商集中在欧美地区和亚太部分国家和地区。电信运营商通常采用高速DSL或FTTP技术,为用户提供IPTV业务。到200
最近,上海贝尔阿尔卡特与四川长虹在成都宣布签订旨在信息家电领域展开深层次大规模战略合作协议。根据协议,上海贝尔阿尔卡特将与四川长虹成立联合工作组,近期工作重心将是联合开发为电信服务供应商度身定制的机顶盒,用来提供高质量的IPTV服务,同时还将在机顶盒标准化方面展开合作。长虹人士向《南方日报》记者透露,此项合作是长虹近来加速从传统家电向信息为首的3C产业供应商转型的重要组成部分。据悉,新帅赵勇上台一年间,长虹已经初步构架成功跨越广电网、通信网及互联网的3C产业体系,逐步发展成为中国领先的信息家电产品与服务综合供应商,而上海贝尔阿尔卡特也已经成为中国电信领域领先的系统解决方案及服务提供商。业界普遍