主页 > 元宇宙 > 正文

谷歌华人研究员发布MobileNeRF,渲染3D模型速度提升10倍

2022-08-31 12:18来源:未知编辑:admin

扫一扫

分享文章到微信

扫一扫

关注99科技网微信公众号

来源:新智元

2020年, 神经辐射场(NeRF) 横空出世,只需几张2D的静态图像,即可合成出该模型的3D场景表示,从此改变了3D模型合成的技术格局。

NeRF以一个多层感知器(MLP)来学习表示场景,评估一个5D隐式函数来估计从任何方向、任何位置发出的密度和辐射,可在体渲染(volumic rendering)框架下用于生成新图像。

NeRF经过最小化多视图色彩一致性的损失的优化后,相比传统的生成方式,对于新视图能够保留更好的图像细节。

但目前主流的NeRF实现方式仍然存在弊端,即 需要专门的渲染算法 ,而这些算法与当下常见的 硬件 并 不匹配 。

传统的NeRF实现使用体积渲染算法,用于在光线沿线的数百个采样位置为每个像素都运行一次大规模MLP,以便估计和密度和辐射度。这种渲染过程对于交互式的可视化来说太慢了, 没法用于实时渲染 。

最近有研究将NeRF烘焙(baking)到稀疏的3D voxel grid中来解决这个问题,比如SNeRG中的每个激活的voxel包含不透明度、漫反射颜色和学习的特征向量。

从SNeRG绘制图像分为两个阶段:第一阶段使用光线行进来累积沿每条光线的预计算漫反射颜色和特征向量,第二阶段使用对累积特征向量进行操作的轻型MLP来产生与视图相关的残差,该残差添加到ac累积漫反射颜色,这种预计算和延迟渲染方法将NeRF的渲染速度提高了三个数量级。

99科技网:http://www.99it.com.cn

相关推荐
谷歌三星腾讯 全球上市公司巨头投资了哪些区块链项目? 谷歌三星腾讯 全球上市公司巨头投资了哪些区块链项目?

像银行一样,企业可能希望远离独立的趋势,并专注于能够为他们提供协同增长

元宇宙2022-08-28

谷歌三星腾讯 全球上市公司巨头投资了哪些区块链项目? 谷歌三星腾讯 全球上市公司巨头投资了哪些区块链项目?

像银行一样,企业可能希望远离独立的趋势,并专注于能够为他们提供协同增长

元宇宙2022-08-25

元宇宙新鲜事|HTC元宇宙手机将支持以太坊和Polygon 前谷歌CEO对元宇宙概念持怀疑态度 元宇宙新鲜事|HTC元宇宙手机将支持以太坊和Polygon 前谷歌CEO对元宇宙概念持怀疑态度

HTC在其 6.6 英寸的元宇宙手机中预装了来自其元宇宙分支Viverse的应用程序,为用

元宇宙2022-07-05

​Meta微软等组建“元宇宙标准论坛”,苹果谷歌缺席、​Meta公开大量XR原型机.| Meta元宇宙指北 ​Meta微软等组建“元宇宙标准论坛”,苹果谷歌缺席、​Meta公开大量XR原型机.| Meta元宇宙指北

6 月 22 日,据 The Block 报道,Khronos Group 成立「Metaverse Standards Forum」,旨在推动

元宇宙2022-06-23

国内元宇宙搜索第一人?这位谷歌系创业者 掀起元宇宙的新风暴  国内元宇宙搜索第一人?这位谷歌系创业者 掀起元宇宙的新风暴 

原标题:国内元宇宙搜索第一人?这位谷歌系创业者 掀起元宇宙的新风暴 二十

元宇宙2022-03-18

重磅!芝加哥大学研究员研究新触觉反馈技术 用薄荷醇在VR中模拟寒冷天气 重磅!芝加哥大学研究员研究新触觉反馈技术 用薄荷醇在VR中模拟寒冷天气

原标题:重磅!芝加哥大学研究员研究新触觉反馈技术 用薄荷醇在VR中模拟寒冷

元宇宙2021-11-12

英国研究员正在开发旨在缓解MRI扫描焦虑症的VR系统 一起来瞅瞅 英国研究员正在开发旨在缓解MRI扫描焦虑症的VR系统 一起来瞅瞅

原标题:英国研究员正在开发旨在缓解MRI扫描焦虑症的VR系统 一起来瞅瞅 伦敦

元宇宙2021-08-15

戴上VR头显也能进行眼神交流!Facebook研究员展示“反向直通”VR原型 一起来瞅 戴上VR头显也能进行眼神交流!Facebook研究员展示“反向直通”VR原型 一起来瞅

原标题:戴上VR头显也能进行眼神交流!Facebook研究员展示反向直通VR原型 一起

元宇宙2021-08-04

加州大学圣克鲁兹分校研究员发现VR能改变玩家的时间感知 一起来看看 加州大学圣克鲁兹分校研究员发现VR能改变玩家的时间感知 一起来看看

原标题:加州大学圣克鲁兹分校研究员发现VR能改变玩家的时间感知 一起来看看

元宇宙2021-06-10

日本丰桥技术科学大学联手东京大学研究员开展基于脚部的VR运动实验 一起来看 日本丰桥技术科学大学联手东京大学研究员开展基于脚部的VR运动实验 一起来看

原标题:日本丰桥技术科学大学联手东京大学研究员开展基于脚部的VR运动实验

元宇宙2021-05-12