DONeRF,让静态图动起来,成本降低48倍

2021-08-10 14:19:58 /

字体大小:【 | |

自从能让JPG静态图变成gif动图的魔法“NeRF”横空出世以后,让人类多了一种视角来看待这个世界的美好。不过,想要依靠这个AI技术来简化3D动态效果的制作,开销可不算小。

这个时候就有不少科研人员就琢磨怎么降低点计算复杂度的问题了,很快!他们推出了只用一个GPU也能以每秒 20 帧的速度实现交互式渲染的DONeRF。

这个DONeRF是由奥地利的一所大学和脸书的科研人员的奇思妙想打造而成的,利用引入真实深度信息的方式,基于深度预言网络的NeRF,也就是神经辐射场方法。

沿相机射线采样5D坐标,实现图像合成。这波操作将原本的推理成本最高能降低了四十八倍,不仅如此,还将原本的画质提升了很多。

DONeRF由着色网络和Sampling Oracle Network这两个网络组成。有人将DONeRF与前辈NeRF进行了对比,发现在相似质量的情况下,NeRF总共使用了256个样本。而DONeRF自使用了其中的四个样本,单单看速度就实现了20到48倍的提升。而成像细节方面,DONeRF的图像边缘肉眼可见的清晰。

这些是你想要的吗?

网友评论