RenderFormer-V2:具異質場景原語的神經渲染統一模型
為何重要
過去學習式光線追蹤往往依賴場景特定的領先工程師開發,RenderFormer-V2 的統一架構大幅降低了 OpenGL/Shaders 開發的技術門檻,若此技術未來能成功標準化並整合至主流虛擬製造引擎,將改變從靜態 render-to-game pipeline 的作業模式,但目前仍屬前沿研究層級。
RenderFormer-V2 是一個基於 Transformer 的學習式神經渲染模型,旨在作為傳統物理運算渲染系統的補充,不論是焦散、體積散播或環境光照等複雜光線傳遞效果,都能無需針對單一場景進行微調或編寫專用程式碼即能處理。-
- 模型將全域光線傳遞建模為序列對序列的轉化運算,並沿用兩階段流程處理視角獨立與視角依賴的渲染邏輯。
- 相較前代,新版在視角獨立階段引入結合視窗注意力與渲染導向注意力匯聚的新機制,以提升模型可擴充套件性。
- 支援環境貼圖與參與性介質等異質場景原語,並透過獨立於表面反射模型的神經嵌入模組來編碼材料外觀。