加州大学圣地亚哥分校和Adobe 研究中心推出名为Neural Directional Encoding（NDE）的技术，它用于高效且准确地模拟镜面物体（如闪亮的金属或光泽油漆）的新视角合成。这类物体的光泽外观以及全局光照效果（包括环境中其他物体的反射）是忠实再现场景的关键组成部分。
主要功能： NDE的主要功能是为神经辐射场（Neural Radiance Fields，简称NeRF）提供一种视角依赖的外貌编码方法，用于渲染具有光泽的物体。NDE通过将基于特征网格的空间编码概念转移到角度域，显著提升了模拟高频角度信号的能力。
主要特点：
- 高效性：NDE通过使用较小的网络，允许快速（实时）推理，从而提高了渲染速度。
- 准确性：NDE能够准确模拟光泽物体的反射细节，包括远场和近场的反射。
- 实时渲染：NDE技术可以在NVIDIA 3090 GPU上以75 FPS的速度运行，这意味着它可以支持实时渲染。
工作原理： NDE将远场反射编码到一个全局环境贴图中，使用可学习的特征向量来表示远场反射。它还通过锥形追踪（cone-tracing）空间特征网格来编码近场反射，从而获得空间变化的方向编码，这可以解决具有挑战性的相互反射效应。
具体应用场景：
- 虚拟现实和增强现实：在VR和AR中，NDE可以用于渲染逼真的3D环境，提供更加真实的视觉体验。
- 电影和游戏制作：在这些领域中，NDE可以用于创建高质量的视觉效果，特别是在需要模拟复杂光照和反射的场景中。
- 产品设计和可视化：设计师可以使用NDE来预览产品在不同光照条件下的外观，从而更好地评估设计。
- 自动驾驶模拟：在自动驾驶技术的研发中，NDE可以用于模拟和渲染车辆与环境的交互，帮助改进算法。
总的来说，NDE通过其创新的角度编码方法，解决了在模拟光泽物体时的挑战，为3D场景的逼真渲染提供了一种有效的技术手段。
0条评论