在此示例中,我们展示了 Ben Mildenhall 等人的研究论文 NeRF:将场景表示为用于视图合成的神经辐射场的最小实现 。等人。作者提出了一种巧妙的方法,通过神经网络对体积场景函数进行建模来合成场景的新颖视图。
为了帮助您直观地理解这一点,让我们从以下问题开始: 是否可以向神经网络提供图像中像素的位置,并要求网络预测该位置的颜色?
图 1:给定图像坐标的神经网络 |
作为输入并要求预测坐标处的颜色。 |
假设神经网络会记住(过度拟合)图像。这意味着我们的神经网络将在其权重中对整个图像进行编码。我们可以查询每个位置的神经网络,它最终会重建整个图像。