巴黎综合理工学院和Adobe 研究中心的研究人员推出新技术RRM，可以让我们在不同的光照条件下重新渲染3D场景。这在计算机图形学和虚拟现实中非常有用，因为它允许我们更真实地模拟和观察场景在不同光照条件下的外观。例如，你有一个3D模型的房间，里面有各种家具和装饰品。通常，当你在计算机中渲染这个场景时，你需要设定光照条件，比如窗户的位置和大小，灯光的颜色和强度。但是，如果使用这项技术，你可以从一组在不同光照条件下拍摄的照片中提取出场景的材料、几何形状和环境光照，然后在任何新的光照条件下重新渲染这个场景，使其看起来就像在真实世界中一样。
主要功能
- 材料提取：能够提取场景中的材料属性，如表面粗糙度、颜色和反射率。
- 几何提取：能够重建场景的3D几何结构。
- 环境光照提取：能够提取场景的环境光照条件，并在新的光照条件下重新渲染场景。
主要特点
- 物理意识：该方法使用物理上可行的辐射场表示，这有助于提取基于物理的参数。
- 环境光结构：基于拉普拉斯金字塔的环境光结构，能够处理复杂的几何形状和高反射物体。
- 高保真度：在参数检索任务中表现优于现有技术，能够实现高保真的重新照明和新视角合成。
工作原理
- 输入图像：系统接收一组在不同光照条件下拍摄的场景照片。
- 辐射场表示：使用神经网络和其他机器学习技术来表示场景的辐射场，这包括场景的几何形状和光照信息。
- 材料和光照提取：通过逆向渲染技术，从辐射场中提取出材料属性和环境光照。
- 重新渲染：使用提取出的材料和光照信息，在新的光照条件下重新渲染场景。
具体应用场景
- 电影和游戏制作：在电影和游戏中，场景的光照条件经常需要根据剧情或游戏进程进行调整。这项技术可以帮助制作人员更轻松地实现这一点。
- 虚拟现实：在虚拟现实中，用户可能会在不同的时间或不同的光照条件下探索虚拟世界。这项技术可以提供更真实的视觉体验。
- 建筑可视化：建筑师和设计师可以使用这项技术来模拟建筑在不同光照条件下的外观，从而更好地评估设计效果。
论文还提到了一些具体的技术细节，比如使用拉普拉斯金字塔来表示环境光照，以及如何通过物理上可行的辐射场来引导材料参数的学习。这些技术使得该方法在处理高反射物体和复杂几何形状时表现更为出色。
0条评论