蔚蓝海岸大学、拉瓦尔大学和Adobe 研究中心的研究人员推出一种名为“使用多照明合成的扩散方法对辐射场进行重新照明（A Diffusion Approach to Radiance Field Relighting using Multi-Illumination Synthesis）”的技术。这是一种先进的计算机图形技术，用于改变三维场景的光照效果，使其看起来像是在不同的照明条件下拍摄的。总的来说，这项技术通过结合最新的2D扩散模型和3D辐射场表示，提供了一种强大的工具，用于在数字场景中实现逼真的光照效果，同时保持了高效的渲染性能和用户交互的灵活性。
主要功能：
- 重新照明： 能够将单一照明条件下捕获的三维场景，通过计算方法改变其光照效果，使其看起来像是在复杂多变的照明环境中拍摄的。
- 多视角一致性： 确保从不同角度观察场景时，光照效果保持一致，没有视觉上的闪烁或不连续。
主要特点：
- 利用2D扩散模型： 通过在多照明数据集上微调一个预训练的2D扩散模型，来生成具有不同光照方向的图像。
- 3D高斯立体表示： 使用3D高斯立体来表示场景的辐射场，这允许高效地渲染细节和复杂光照效果。
- 直接光照控制： 提供直接控制光照方向的能力，使得用户可以交互式地调整场景的光照效果。
工作原理：
- 2D扩散模型微调： 使用多照明条件下的数据集对2D扩散模型进行微调，使其能够根据指定的光照方向生成图像。
- 生成多照明数据集： 利用微调后的2D模型，将单一照明条件下的多视角数据集增强为多照明数据集。
- 辐射场训练： 使用增强后的数据集训练一个新的可重新照明的辐射场，该辐射场可以直接控制光照方向，并在多视角间保持一致性。
具体应用场景：
- 虚拟现实和增强现实： 在VR或AR应用中，用户可以实时改变场景的光照，以适应不同的视觉需求或创造特定的氛围。
- 电影和游戏制作： 在后期制作过程中，艺术家可以调整场景的光照效果，而无需重新拍摄或使用复杂的光照设备。
- 室内设计可视化： 允许设计师在不同时间（如白天或晚上）展示室内设计的效果，为客户提供更直观的体验。
0条评论