您现在的位置是:首页 > 人工智能人工智能
苹果开发「AI 建筑师」GAUDI:根据文本生成超逼真 3D 场景!
cc博主2022-08-04【人工智能】550人已围观

作者 | 李梅
编辑 | 陈彩娴
如今,每隔一段时间就有新的文本生成图像模型释出,个个效果都很强大,每每惊艳众人,这个领域已经是卷上天了。不过,像 OpenAI 的 DALL-E 2 或谷歌 的 Imagen 等 AI 系统,都只能生成二维图像,如果文字也能变成三维场景,那带来视觉体验势必加倍提升。现在,来自苹果的 AI 团队推出了 3D 场景生成的最新神经架构—— GAUDI 。
论文地址:https://arxiv.org/pdf/2207.13751.pdf
基于 NeRFs 的 3D 渲染神经渲染(nerual rendering)将计算机图形学与人工智能结合起来,已经产生了很多从 2D 图像生成 3D 模型的系统。比如最近 Nvidia 开发的 3D MoMa 可以在一个小时内从不到 100 张的照片中创建出 3D 模型。谷歌也依靠神经辐射场(NeRFs )在谷歌地图中将 2D 卫星和街景图像组合成 3D 场景,实现了沉浸式视图。谷歌的 HumanNeRF 还可以从视频中渲染出 3D 人体。目前,NeRFs 主要还是用作 3D 模型和 3D 场景的一种神经存储介质,可以从不同的相机视角进行渲染。NeRFs 也已经开始被用于虚拟现实体验。那么,NeRFs 这种从不同摄像机角度逼真地渲染图像的强大能力,能不能用于生成式 AI 呢?当然可以,已经有研究团队尝试了 3D 场景的生成,如谷歌在去年首次推出了 AI 系统 Dream Fields,它将 NeRF 生成 3D 视图的能力与 OpenAI 的 CLIP 评估图像内容的能力相结合,最终实现了能够生成匹配文本描述的 NeRF。
3D 渲染专家 GAUDI对于上述摄像机位置受限的问题,苹果的 GAUDI 模型拿出了三个专门的网络来轻松搞定:GAUDI 有一个相机姿态解码器,它将摄像机姿态与场景的 3D 几何和外观分离开来,可以预测摄像机的可能位置,并确保输出是 3D 场景架构的有效位置。









雷峰网版权文章,未经授权禁止转载。详情见转载须知。
Tags:v2ray 免费节点ssr软件下载
相关文章
猜你喜欢
关于Z-Blog的网址的瑕疵及解决
建站如果,首页分页、分类分页、作者分页、标签分页、日期分页统一采用【*/2/default.html】式网址,URL配置如下。首页分页【{%host%}/page/{%page%}/default.html】分类页【{%host%}/categor...
阅读更多永久v2ray节点链接分享-ssr机场节点测评账号每日更新(2022/10/14)
技术好文今天星期五,cc博主继续为大家提供永久v2ray节点链接分享-ssr机场节点测评账号,更新于2022年10月14日17点更新,最新v2ray节点分享。需要付费节点下方推荐点击v2rayn出门右拐即可,周末更新资源部分可用,免费资源不易,请大家珍惜。CC博客将分...
阅读更多DeepMind 首席科学家 Oriol Vinyals 最新访谈:通用 AI 的未来是强交互式元学习
人工智能整理|李梅编辑|陈彩娴自 2016 年 AlphaGo 在围棋中击败人类以来,DeepMind 的科学家一直致力于探索强大的通用人工智能算法,Oriol Vinyals 就是其中之一。Vinyals 于 2016 年加入 DeepMind,目前任首席科学家...
阅读更多美国ceranetworks1G带宽不限流量 1核1G29元/月2核2G39元/月4核4G69元/月8核8G129元/月
服务器评测提速啦(www.tisula.com)是赣州王成璟网络科技有限公司旗下云服务器品牌,目前拥有在籍员工40人左右,社保在籍员工30人+,是正规的国内拥有IDC ICP ISP CDN 云牌照资质商家,2018-2021年连续4年获得CTG机房顶级金牌代理商荣誉...
阅读更多破12亿!科沃斯618业绩再现行业龙头实力,“说一声就干净”带来全新体验
业界6月21日,服务机器人行业的领导品牌科沃斯官方公布618成绩,截至6月20日23:59全渠道成交额突破12亿元,包括地宝、沁宝和窗宝在内的科沃斯家用服务机器人全品类持续领跑,稳居各自品类的冠军宝座,以压倒性的优势保持国内服务机器人行业龙头地位。从自然交互预...
阅读更多