您现在的位置是:首页 > 芯片芯片
手游变革时刻!移动GPU首次实现桌面级光线追踪效果
cc博主2021-11-09【芯片】724人已围观
智能手机的全面普及,以及手机性能的持续提升,带来了手机游戏市场的快速增长。即便在整个游戏市场收入整体小幅下滑的2021年,手游表现依旧强劲。
Newzoo今年7月发布的《2021年全球游戏市场报告》预测,移动游戏市场将在2021年产生907亿美元的收入,同比增长4.4%,这部分收入将占全球游戏市场总收入的一半以上。
手游市场的快速增长,除了玩手游更加便捷之外,体验不断接近桌游也是关键。最近几年,光线追踪进一步提升了游戏体验。2018年,英伟达发布了十多年来在计算机图形领域的重要创新——图灵GPU架构,首次将光线追踪带入桌面级市场。
2021年11月,Imagination也发布了代表其十年来推动光线追踪在低功耗设备上应用的发展成果PowerVR Photon光线追踪架构,首款GPU IP IMG CXT也一同亮相。这是业界首次在移动 IP上实现了桌面级质量的光线追踪视觉效果,也是全球首款在移动端实现硬件光线追踪的GPU。
cc博客网了解到,基于PowerVR Photon光线追踪架构的终端产品有望最早在2023年上市,这就意味着,手游玩家也将享受到光追游戏体验,手游市场的变革时刻也即将到来。
移动设备上的光线追踪效果如何?
光线追踪的目的是通过模拟真实世界中光线的表现,创造出与现实生活几乎无异的三维(3D)场景。光线追踪不是新鲜事物,在许多电影中已经有所应用,比如《玩具总动员4》的开场镜头中,雨坑里反射的光线就是光线追踪渲染的效果,《阿凡达》《头号玩家》《失控玩家》等电影也运用了光线追踪。
但是,光线追踪在游戏中还非常新鲜,这是因为光线追踪涉及巨大的计算量,桌面级和移动设备的计算能力无法满足所需的高计算负载。2018年,英伟达的图灵架构GPU打破了瓶颈,将光线追踪技术引入桌面级游戏市场。
实际上,Imagination在光线追踪方面的研究也有大概十年的时间,2014年就采用28nm工艺就设计测试了一款光线追踪GPU。
“当时整个生态还没有准备好,图形API也没有与光线追踪相关的标准。”Imagination中国区战略市场与生态副总时昕说,“从2018年桌面级GPU公司开始推出PC上的光线追踪开始,整个业界生态开始投入,在2020年Khronos图形标准化组织也推出了Vulkan API的光线追踪Extension,我们认为推出具有光线追踪功能的芯片的时机已经到来。”
将光线追踪引入移动端,效果自然要向桌面级看齐。用一个直观的例子来展示Imagination实现的光线追踪效果,没有光线追踪的情况下,物体之间的反射并不能很好的呈现,比如图片中的罐子,开启光线追踪功能后墙面的绿色从反光材料上反射出来,所有物体都具有柔和的反射效果。
开启光线追踪,阴影的部分也会变得非常柔和,几乎看不见,但巧妙地增加了照明的真实感,更接近现实世界。
还有,光线追踪中的全局照明,能为场景中的物体增加出色的环境照明效果,实现最真实的照明。
如何实现移动端光追性能和功耗的平衡?
实际上,想要在已有的移动设备上实现光线追踪功能并非不可能。
“采用软件方案也能在移动端实现光线追踪效果,但那只能在演示当中,如果应用于游戏,效果一定不太好。” Imagination技术前瞻副总裁Kristof Beets 指出,“因为这种方案没办法在功耗和效果之间达到一个很好的平衡,软件仍然要使用大量的计算资源用于阴影和多边形的贴图。”
为了更直观反映实现光线追踪不同方案及效果的差别,Imagination对光线追踪进行了分级,建立了光线追踪等级系统(RTLS):
1级为现有硬件上的软件解决方案。性能低,效率低。
2级增加了用于光线追踪的第一部分硬件。与1级相比,可以将基本光线追踪效果的效率提高44倍。
3级增加了用以处理发射光线的硬件,与2级解决方案相比,可大大降低功耗。
4级增加了相干性聚集功能,针对复杂的桌面级效果大大提升了性能,让其可以在移动端功耗预算下应用。
5级是一项未来等级,可在场景中实现更大数目的动态目标,并带有额外的硬件加速。
Imagination新发布的CXT GPU IP是一个RTLS 4级的光追产品,目前业界的其它移动端解决方案为RTLS 1级。Imagination能够实现RTLS 4级光追的核心是IMG CXT-48-1536 RT3 内核具有三个光线加速集群(RAC),可提供总体高达1.3 GRay/s的性能,即使在移动设备低功耗的情况下,也能以1080P分辨率实现30~60FPS的实时光线追踪渲染,满足日常游戏高端需求。
RAC包含了光线存储(Ray Store)、光线任务调度器(Ray Task Scheduler)和相干性聚集器(Coherency Gatherer),并与两个128宽的统一着色器集群(USC)紧密耦合,着色器集群有高速专用数据通路,可以实现高效且功耗最低的光线追踪部署。
时昕解释,“很多光追算法用传统的方法实现效率很低,用过专门的硬件单元,比如RAC,效率成倍提升。”
Imagination给出的数据显示,在光栅化图形处理性能方面,最新的CXT与Imagination的上一代GPU IP相比,计算、纹理和几何性能都提高了50%。
功耗方面,得益于低功耗超标量(superscalar)架构可在低时钟频率下提供高性能,从而实现更高的帧率功耗比(FPS/W)效率,Imagination图像压缩(IMGIC)技术也可以大幅降低带宽需求。
高性能和低功耗看似对立,但实际并不矛盾。
“以前在复杂场景的光照效果,包括反射、阴影、全局照明等,都要靠着色器一个个去模拟计算,我们的CXT把渲染的负载转移到更为专用的硬件上面,效率更高的同时实现更低功耗。” Kristof Beets解释。
当然,讨论光线追踪的性能和功耗不能抛开技术路线。光线追踪有两种方式来实现,一种是用光线查询的方式,一种是用光线管线的方式,这两种方式都需要计算10亿条及更多数量的光线。
光线管线的方式是计算光源发射出的光子,碰到场景当中物体的反射、折射等反应,最终达摄像机位或者游戏玩家的眼睛。光线查询方式就是反过来,从摄像机位或游戏玩家的角度,计算出光源。
“光线查询浪费的计算比较少,所以有功耗优势,但是技术难度也更大一些。目前很多宣称有光线追踪技术大部分是用光线管线实现,Imaginatiom同时支持光线管线和光线查询两种方式,客户和合作伙伴可以自由选择。”时昕表示。
光追普及的关键是生态
Kristof Beets说,“基于我们十多年在光线追踪方面的投入和积累,我们可以推出RTLS 5级的产品。之所以现阶段推出RTLS 4级产品,主要是出于市场考量。我们跟市面上的光线追踪开发者沟通后发现,如果我们成为市场上唯一提供RTLS 5级光线追踪硬件的公司,不会有多少开发者来开发相应的应用。”
先推出RTLS 4级光追产品培育市场,比如说游戏的3D引擎、游戏开发者,再慢慢把光线追踪市场做大。Imagination推出GPU IP的同时也推出了软件开发套件PVRTune工具,可以支持开发者查看底层的光线追踪计数器,例如:每秒的光线数、包围盒测试器负载、缓存命中率、每秒遍历(递归)的光线数等,还可以模拟CXT的功能和行为,降低使用者门槛。
这也容易理解,Imagination在2014年就测试了其光线追踪的技术和硬件,但并没有推出产品的原因也是生态原因。处理器的成功离不开整个生态,包括接口、工具等。Imagination作为IP提供商,并不直接出售芯片及解决方案,想要直接推动光线追踪的发展难度很大,只能等有一定的生态基础后,再推出相关产品。
“在标准化方面,我们大量参与了与微软的沟通和讨论,在此基础上,再继续提升GPU架构。”Kristof Beets说。
未来几年,移动市场上的光线追踪产品仍然会在软件层面,直到硬件方案进入市场并呈现出巨大的优势。
那时候,Imagination不仅能推动移动和嵌入式终端光线追踪的发展,也能帮助其将GPU的市场从移动端拓展到更高性能的桌面和数据中心市场。
Imagination中国区董事长白农告诉cc博客网(公众号:cc博客网):“功耗一直不是目前桌面市场GPU的优势,但随着应用的多元化以及对功耗的更高要求,功耗一直是我们的优势,我们的光线追踪产品能够让客户定制更高能效的产品。Imagination的商业模式,也支持客户的创新。并且,我们提供GPU、CPU、AI加速、连接网络的全面产品组合,适应异构的发展趋势,能够满足客户多样化的需求。”
据悉,Imagination Photon架构的可扩展性,可以实现高达 9 TFLOPS(每秒万亿次浮点运算)的FP32光栅化性能和超过7.8 GRay/s的光线追踪性能,同时能够提供比当今的RTLS 2 级或RTLS 3级光线追踪解决方案高2.5倍的功耗效率。
写在最后
在英伟达的推动下,光线追踪的生态在过去几年间已经有了明显的发展,这也是Imagination能够推出移动端光线追踪GPU产品的关键。光线追踪是一项改变游戏规则的技术,可以使图形真实感达到跃升式变化。
光线追踪不是全新的技术,但却有可能改变GPU市场的格局,市场的定制需求以及对功耗的更高需求,都是Imagination从移动市场进入桌面和数据中心市场的机会。
当然,除了更高效和更低功耗的产品,构建强大的生态才是Imagination在光线追踪变革中成功的关键。目前Imagination已经与Carbonated、腾讯游戏、完美世界、网易游戏合作,推动高性能渲染和光线追踪等图形新技术在移动游戏中的应用。
待到2023年基于硬件光线追踪的移动端产品推向市场之后,我们就能够更清晰的判断光线追踪对手游以及Imagination的影响。
注:文中图片来自Imagination
相关文章:
一款多核架构GPU IP有多达33种配置!Imagination要守住移动市场攻向云端
Imagination发布史上最强移动GPU IMG A,未来几年将支持光线追踪
Tags:v2rayn节点
相关文章
- 只需1/500数据便可掌握Atari游戏!清华叉院助理教授提出小数据RL模型,引爆AI社区
- 2021EMNLP开幕,复旦黄萱菁任程序主席:中国投稿量最高,接收207篇,仅次于美国
- EMNLP 2021Oral | 拓展你的视野!UCLA提出:地区多样性视觉常识推理
- 内幕公开:为抢电动车企合作,福特是如何挤走通用汽车的?
- 抖音内测“听视频模式”:切回桌面或者锁定屏幕后,可继续听视频内容;150多亿美元税单要缴,马斯克提议出售 10% 特斯拉股份;新东方欲转战农业平台 | 雷锋早报
- 英特尔的雄心壮志
- DSP营销和SEM营销的特点有哪些?
- 《王者荣耀》情侣名字诗意 诗意的情侣名字大全
- 火山小视频的广告位资源有哪些?
- 小红书笔记收录技巧有哪些?
猜你喜欢
又有3名芯片大基金公司高管被带走调查,落马高管一人身兼8家上市公司董事;拜登签署3558亿芯片补贴法案;每日优鲜被约谈|雷峰早报
业界芯片圈大风暴,大基金管理公司3名高管被调查,落马高管一人身兼8家上市公司董事芯片行业的反腐地震不断。8月9日晚间,国家集成电路产业投资基金股份有限公司的管理公司,华芯投资管理公司的3名高管落马。据消息,华芯投资原总监杜洋、投资三部副总经理杨征帆涉嫌严重违纪违...
阅读更多商汤科技CVPR 2022再创佳绩用技术创新直击行业痛点
业界6月19日-23日,全球人工智能计算机视觉领域顶级国际会议CVPR 2022(Computer Vision and Pattern Recognition,即国际计算机视觉与模式识别)在美国新奥尔良举行,并同步进行线上会议。商汤科技及联合实验室共71篇论文入...
阅读更多首发|融合视觉传感芯片公司锐思智芯完成近2亿元A轮融资
芯片雷峰网(公众号:雷峰网)消息,本周一,融合视觉传感器芯片公司锐思智芯宣布,公司已于今年初完成近2亿元人民币A轮融资,锐思智芯创始人邓坚表示,本轮融资将用于IoT领域的横向布局与纵向落地,以及产品研发迭代。本轮融资由巡星投资(OPPO旗下投资公司)和同创伟业联...
阅读更多全球首个金融图数据库测试基准立项,蚂蚁集团开放专利共建
业界5月26日,国际权威技术协会“关联数据基准委员会”(LDBC,Linked Data Benchmark Council)发布消息,全票通过了全球首个金融图数据库测试基准“LDBC Financial Benchmark”(以下简称 FinBench)的立项。...
阅读更多FF高层大换血后续:贾跃亭亲信王佳伟出局,董事会与管理团队矛盾加剧,华人高管影响力被严重削弱
业界雷峰网(公众号:雷峰网)4月12日消息,据证券日报报道,FF核心高管之一、资本部副总裁王佳伟更新了个人LinkedIn页面,显示已从FF离职。经多方核实,王佳伟确实已主动离职。接近FF人士透露,目前FF董事会与贾跃亭为主的管理团队之间的矛盾升级,以贾跃亭为代...
阅读更多