Lewati ke konten utama
diskon 50% semua paket, waktu terbatas. Mulai dari $2.48/mo
20 min left
AI dan Machine Learning

What Is Neural Rendering? How AI Is Replacing the Graphics Pipeline

S Oleh Sherwin 20 menit baca
Diagram showing the spectrum of neural rendering techniques from scene reconstruction to real-time pipeline components to generative methods, with the Cloudzy logo

Ketika NVIDIA menunjukkan DLSS 4 menghasilkan lima belas dari setiap enam belas piksel dengan AI, sebagian besar audiens tidak melihat kemajuan. Mereka melihat "frame palsu" dan "AI slop": detail hasil generasi yang terlihat benar sampai akhirnya tidak, dan yang tidak bisa Anda debug seperti Anda men-debug poligon yang salah tempat. Laporan PCGuide tentang jajak pendapat komunitas menemukan bahwa 54% respons adalah "Tidak" yang tegas terhadap DLSS 5 tampilannya, dengan sebagian besar kritik ditujukan pada fitur wajah dan reaksi "AI slop". Reaksi itu layak ditanggapi serius, dan kita akan kembali membahasnya.

Tetapi masalah yang lebih besar di setiap argumen itu adalah bahwa "neural rendering" dipakai untuk setidaknya lima hal berbeda: upscaling, frame hasil generasi AI, rekonstruksi adegan dari foto, demo NeRF dan Gaussian Splatting yang Anda lihat di media sosial, dan sistem riset yang merender seluruh gambar dengan satu jaringan. Orang berdebat tanpa saling nyambung karena masing-masing menunjuk lapisan yang berbeda namun memakai kata yang sama. Jensen Huang dari NVIDIA menyebut pergeseran ini sebagai "momen GPT untuk grafis." Itulah klaimnya. Pertanyaan yang berguna adalah apa yang sebenarnya terjadi di baliknya.

Inilah benang merah yang membuat semuanya bisa dipahami: GPU semakin memprediksi gambar alih-alih menghitungnya. Secara tradisional, GPU menghitung setiap piksel dengan menyimulasikan geometri, pencahayaan, dan material (rasterisasi, dan baru-baru ini ray tracing di atasnya). Neural rendering mengubah apa yang dihitung versus apa yang diprediksi oleh jaringan yang telah dilatih. Perbedaan tunggal itu adalah tulang punggung artikel ini. Di akhir, Anda akan bisa menempatkan teknik apa pun pada sebuah spektrum, tahu mana yang berjalan secara real-time dan di hardware apa, dan membedakan apa yang sudah hadir dalam game hari ini dari apa yang masih berupa makalah riset atau demo GTC. Ini adalah peta, bukan panduan cara. Mekanika mendalam dari satu teknik mana pun adalah artikel tersendiri.

Versi Singkat

  • Neural rendering adalah sebuah spektrum, bukan sinonim untuk DLSS. Ia membentang dari riset rekonstruksi adegan (NeRF, Gaussian Splatting), komponen real-time yang berada di dalam pipeline rendering (DLSS, Ray Reconstruction, neural radiance cache), hingga metode generatif yang menciptakan detail yang tidak pernah dimiliki frame tersebut.
  • Benang merahnya adalah "prediksi alih-alih menghitung." Setiap teknik menggantikan tahap pipeline yang mahal untuk dihitung dengan jaringan yang memprediksi hasil yang menjadi pelatihannya.
  • Sebagian besar yang hadir hari ini bersifat hibrida. Upscaling, frame generation, dan AI denoising kini berjalan dalam game real-time, sementara neural texture compression dan neural shader mulai muncul melalui toolkit pengembang. Renderer neural penuh yang menggambar seluruh gambar dengan satu jaringan masih dalam tahap riset.
  • Ini menjadi lintas-vendor, bukan sekadar cerita NVIDIA. Pekerjaan DirectX dari Microsoft pada ML tingkat shader dimulai dengan Cooperative Vectors di Shader Model 6.9 dan bergerak menuju dukungan aljabar linear yang lebih luas di Shader Model 6.10, memberi engine sebuah jalur untuk menargetkan beban kerja shader bergaya neural di luar stack satu vendor.

Mengapa "Neural Rendering" Berarti Lima Hal Berbeda

Neural rendering adalah kelas metode yang menggunakan jaringan saraf untuk memprediksi bagian-bagian dari sebuah gambar (piksel, pencahayaan, material, bahkan seluruh frame) yang kalau tidak begitu akan dihitung GPU dari nol. Survei Tewari dkk. mendefinisikannya sebagai penggabungan grafis komputer klasik dengan model generatif mendalam untuk keluaran fotorealistik. Istilah ini mencakup spektrum yang luas, dan "DLSS" adalah satu titik di dalamnya.

Alasan percakapan ini berantakan adalah karena spektrum tersebut memiliki setidaknya tiga lapisan berbeda, dan publik memakai satu kata untuk semuanya.

Lapisan pertama adalah neural rendering akademis / rekonstruksi: NeRF, 3D Gaussian Splatting, dan differentiable rendering. Ini mengambil foto atau pengukuran dari adegan nyata dan mempelajari representasi yang bisa Anda render dari sudut kamera baru. makalah NeRF asli (Mildenhall dkk., 2020) melatih jaringan kecil untuk memetakan koordinat 3D dan arah pandang ke warna dan kepadatan, lalu merender tampilan baru dengan mengkuerinya. Lapisan ini sebagian besar offline. Ia merekonstruksi adegan; ia tidak menjalankan loop frame game Anda.

Lapisan kedua adalah neural rendering pipeline real-time: jaringan yang berjalan di dalam atau bersama frame yang dirasterisasi secara normal. Upscaling DLSS, Ray Reconstruction, dan neural radiance cache berada di sini. Pipeline tetap melakukan rasterisasi dan ray tracing; sebuah jaringan menangani satu tahap mahalnya. Inilah lapisan yang hadir dalam game hari ini.

Lapisan ketiga adalah neural rendering generatif: jaringan menghasilkan konten gambar yang sama sekali tidak pernah dihitung oleh frame. Frame hasil generasi DLSS 4 berada di tepi lapisan ini, dan DLSS 5 (yang telah diumumkan NVIDIA untuk Musim Gugur 2026) mendorong lebih jauh ke dalamnya dengan menghasilkan detail pencahayaan dan material alih-alih hanya menginterpolasi antara frame yang dirender.

Ketiga lapisan ini berperilaku berbeda, berjalan pada kecepatan berbeda, dan membutuhkan hardware berbeda. Memperlakukannya sebagai satu hal adalah alasan mengapa dua orang bisa sama-sama mengatakan "neural rendering terlalu dilebih-lebihkan" dan "neural rendering adalah masa depan" dan keduanya sebagian benar.

Inti bagian: Istilah ini ada sebelum DLSS dan bukan sinonimnya. DLSS adalah satu aplikasi (real-time, dalam pipeline) di dalam spektrum yang jauh lebih luas yang membentang dari rekonstruksi adegan offline hingga frame yang sepenuhnya dihasilkan.

Bagaimana Neural Rendering Menggantikan Bagian-Bagian Pipeline Brute-Force

Timeline of neural rendering milestones from 2018 DLSS 1.0 to 2026 DLSS 5, showing how each stage moved from compute to predict

Dengan multi-frame generation DLSS 4 penuh, kira-kira lima belas dari setiap enam belas piksel di layar dihasilkan AI alih-alih dirender secara tradisional (menurut angka DLSS 4 dari NVIDIA). Angka itu adalah keseluruhan pergeseran yang dipadatkan menjadi satu statistik: renderer menghitung sebagian kecil gambar dan memprediksi sisanya.

Rendering tradisional mengupayakan setiap piksel. GPU merasterisasi geometri, menjalankan shader untuk menghitung pencahayaan dan material, dan (dengan ray tracing) menyimulasikan cahaya yang memantul di sekitar adegan. Ray tracing khususnya sangat mahal, karena cahaya realistis membutuhkan banyak pantulan dan banyak sampel per piksel, dan noise dari under-sampling harus dibersihkan setelahnya. Seiring adegan menjadi lebih ambisius, tahap-tahap termahal menjadi target yang jelas: alih-alih menghitungnya, latih sebuah jaringan untuk memprediksi keluarannya.

Perkembangannya stabil, bukan mendadak:

  • 2018, DLSS 1.0. Langkah komersial pertama: render pada resolusi rendah, prediksi gambar resolusi tinggi. Memindahkan upscale dari "hitung lebih banyak piksel" ke "prediksi lebih banyak piksel."
  • 2020, NeRF. Rekonstruksi adegan dari gambar melalui radiance field yang dipelajari. Memprediksi tampilan baru alih-alih memodelkan dan merender geometri.
  • 2021, Neural Radiance Cache. Memprediksi cahaya pantulan selama path tracing sehingga renderer bisa berhenti menelusuri lebih awal.
  • 2022, DLSS 3 Frame Generation. Menghasilkan seluruh frame antara alih-alih merendernya.
  • 2023, 3D Gaussian Splatting. Alternatif yang lebih cepat dan condong ke real-time untuk NeRF pada adegan hasil rekonstruksi.
  • 2025, DLSS 4 + RTX Kit. Multi-frame generation ditambah toolkit komponen neural (texture compression, radiance cache, neural shader).
  • 2025, DirectX Cooperative Vectors (pratinjau). API lintas-vendor untuk matematika matriks yang dibutuhkan neural shader (diperkenalkan dalam pratinjau sebagai bagian dari Shader Model 6.9).
  • 2026, DLSS 4.5. Peningkatan kualitas dan Ray Reconstruction secara bertahap (dijelaskan oleh NVIDIA di Computex).
  • Musim Gugur 2026, DLSS 5 (diumumkan). Dorongan berikutnya menuju neural rendering generatif.

Dibaca dari atas ke bawah, setiap baris adalah langkah yang sama yang diterapkan pada tahap yang berbeda: ambil sesuatu yang dulu dihitung pipeline dan buat sebuah jaringan memprediksinya.

Enam Lapisan: Apa yang Digantikan AI di Setiap Tahap Pipeline

Diagram of the six neural rendering techniques mapped to where they run in the graphics pipeline: AI upscaling, frame generation, ray reconstruction, neural radiance cache, neural texture compression, and neural shaders

Enam teknik membawa sebagian besar neural rendering real-time saat ini, dan masing-masing menggantikan tahap perhitungan tertentu: upscaling (resolusi), frame generation (jumlah frame), ray reconstruction (denoising), neural radiance cache (global illumination), neural texture compression (penyimpanan material), dan neural shader (komputasi dalam shader). Mengetahui tahap mana yang disentuh masing-masing adalah sebagian besar dari pertarungan.

Ini terbagi berdasarkan di mana dalam pipeline jaringan itu berjalan. Beberapa beroperasi di paling akhir sebagai post-process pada frame yang sudah jadi; beberapa berjalan di tengah pipeline bersama ray tracing; beberapa berada di dalam shader itu sendiri. Lokasi itu bukanlah detail sepele. Ia menentukan seberapa cepat teknik itu bisa berjalan dan hardware apa yang dibutuhkannya. Tabel ini memetakan keenam teknik tersebut; subbagian di bawah menjelaskan mekanisme yang tidak muat rapi di setiap sel.

Teknik Apa yang digantikannya Kelayakan real-time Hardware yang dibutuhkan Lintas-vendor?
Upscaling AI (super resolution) Menghitung piksel resolusi native Real-time, overhead rendah Core Tensor / matriks (RTX 20+, RDNA 4, Intel XMX) Ya sebagai kategori; implementasinya tetap spesifik per vendor (DLSS, FSR / FSR Upscaling, XeSS)
Frame generation Merender frame antara Real-time; menambah latensi RTX 40+ (DLSS 3), RTX 50 untuk multi-frame Sebagian; spesifik per vendor
Ray reconstruction Stack denoiser yang disetel manual Real-time RTX 20+ NVIDIA saat ini
Neural radiance cache Menghitung cahaya tidak langsung multi-pantulan Real-time (~2,6 ms dilaporkan) Core matriks kelas RTX NVIDIA saat ini (RTX Kit)
Neural texture compression Penyimpanan material terkompresi blok Decode real-time Core matriks kelas RTX SDK/tooling NVIDIA saat ini; dukungan ML tingkat shader yang lebih luas sedang distandarisasi secara terpisah
Neural shader Jalur kode shader yang dihitung Real-time ML tingkat shader / GPU berkemampuan matriks Mulai muncul melalui jalur DirectX SM 6.9 / SM 6.10

Upscaling AI (Super Resolution)

Upscaling AI merender frame pada resolusi yang lebih rendah dan memprediksi hasil resolusi tinggi, sehingga GPU menggambar jauh lebih sedikit piksel dan sebuah jaringan mengisi strukturnya. DLSS, FSR 4 dari AMD, dan XeSS dari Intel semuanya melakukan ini melalui temporal upsampling: mereka mengambil sampel piksel berbeda di sepanjang frame yang berurutan dan menggabungkan riwayat itu dengan motion vector untuk merekonstruksi detail yang tidak dimiliki satu frame resolusi rendah.

Ini adalah lapisan yang paling matang dan paling banyak digunakan, dan di sinilah realitas lintas-vendor paling jelas. DLSS 4 memindahkan upscaler-nya dari jaringan konvolusional ke transformer untuk stabilitas detail yang lebih baik. FSR 4 adalah upscaler berbasis ML pertama AMD, berjalan di RDNA 4 dengan inferensi FP8 alih-alih heuristik tulis-tangan dari versi FSR sebelumnya. XeSS menggunakan unit matriks XMX dari Intel. Tiga vendor, ide dasar yang sama: prediksi piksel yang tidak Anda render.

Frame Generation dan Multi-Frame Generation

Frame generation memprediksi seluruh frame di antara frame yang benar-benar dirender GPU dengan menggabungkan data game seperti motion vector dengan estimasi optical-flow dan AI. DLSS 3 menggunakan Optical Flow Accelerator RTX seri 40 untuk menyisipkan satu frame hasil generasi di antara frame yang dirender; DLSS 4 Multi Frame Generation di hardware RTX seri 50 dapat menghasilkan hingga tiga frame tambahan per frame yang dirender secara tradisional, dan NVIDIA mengatakan DLSS 4 menggantikan langkah optical-flow berbasis hardware dengan model AI yang lebih efisien.

Inilah lapisan yang sebenarnya menjadi inti argumen "frame palsu", dan pembingkaiannya penting di sini. Frame hasil generasi adalah interpolasi masuk akal tentang ke mana adegan akan menuju: ia menunjukkan konten visual yang berguna. Tetapi ia diprediksi, bukan dirender dari kondisi aktual game, dan ia tidak membawa logika atau input game yang baru. Yang penting, frame generation berjalan setelah sebuah frame dirender, yang menambah latensi alih-alih menghilangkannya; Reflex 2 dari NVIDIA hadir khusus untuk merebut kembali latensi itu. Jadi "frame generation membuat game lebih cepat" adalah kebenaran sebagian: ia meningkatkan kehalusan yang dirasakan (lebih banyak frame ditampilkan) tanpa meningkatkan laju game benar-benar diperbarui dan merespons. Kesenjangan antara apa yang Anda lihat dan apa yang diketahui game itulah keseluruhan perdebatannya, dan untuk permainan kompetitif, di mana latensi input menentukan hasil, ini adalah trade-off yang layak dipertimbangkan.

Ray Reconstruction (AI Denoising)

Ray Reconstruction menggantikan tumpukan filter denoising yang disetel manual yang diandalkan rendering ray-traced dengan satu jaringan saraf yang dilatih untuk merekonstruksi gambar bersih dari input ray-traced yang berisik dan kurang sampel. Path tracing hanya mampu beberapa sampel cahaya per piksel secara real-time, yang membuat keluaran mentahnya berisik; sesuatu harus membersihkannya sebelum Anda melihatnya.

Pendekatan tradisionalnya adalah rangkaian denoiser khusus, masing-masing disetel manual untuk efek tertentu. Menggantinya dengan satu jaringan terlatih cenderung mempertahankan detail yang dikaburkan filter setelan-tangan, terutama pada pantulan dan pencahayaan halus, dan cukup satu jaringan untuk dipelihara alih-alih pipeline rapuh yang terdiri dari banyak filter. Ini adalah contoh bersih dari benang merah tersebut: tahap denoise berpindah dari "menghitung dengan heuristik tulis-tangan" ke "memprediksi dengan model terlatih."

Neural Radiance Cache (Global Illumination)

Neural radiance cache (NRC) memprediksi bagaimana cahaya memantul di sekitar adegan sehingga path tracer bisa berhenti menelusuri sebagian besar sinar lebih awal alih-alih mengikuti setiap pantulan hingga tuntas. Global illumination (cahaya lembut tidak langsung yang memantul dari dinding dan lantai) adalah salah satu hal termahal dalam grafis real-time, dan mekanisme yang membuat NRC bekerja jarang dijelaskan dengan bahasa sederhana, jadi layak diperlambat untuk dipahami.

Inilah mekanismenya. Path tracer biasanya mengikuti setiap sinar cahaya melalui banyak pantulan, yang di situlah biayanya meledak. NRC melatih jaringan kecil selama rendering (bukan sebelumnya) untuk memprediksi cahaya yang tiba di suatu titik setelah pantulan lebih lanjut. Jadi path tracer menelusuri sinar untuk satu atau dua pantulan, lalu bertanya pada jaringan "berapa sisa cahaya di sini?" dan mengakhiri jalurnya lebih awal; makalah neural radiance caching real-time (Müller dkk., 2021) melaporkan pengakhiran sebagian besar jalur dengan cara ini. Anggap saja sebagai cache yang tidak menyimpan jawaban persis yang pernah dilihatnya, tetapi mempelajari pola pencahayaan adegan dengan cukup baik untuk menjawab kueri yang belum pernah dilihatnya, dan terus belajar ulang seiring adegan berubah. NVIDIA melaporkan NRC berjalan dengan overhead sekitar 2,6 ms, yang membuatnya layak real-time alih-alih sekadar keingintahuan riset.

Neural Texture Compression

Neural texture compression (NTC) mengompresi semua channel tekstur dari sebuah material secara bersamaan dengan sebuah jaringan, mencapai penghematan VRAM hingga 8x dibandingkan kompresi blok tradisional pada kualitas visual yang serupa (menurut dokumentasi RTX Kit dari NVIDIA). Material modern bukanlah satu tekstur. Ia adalah tumpukan tekstur (warna, normal, roughness, metalness, dan lainnya), dan channel-channel itu saling berkorelasi dengan cara yang dibuang oleh kompresi blok, yang memampatkan setiap channel secara terpisah.

NTC memanfaatkan korelasi itu. Dengan mempelajari struktur gabungan di seluruh channel material sekaligus, ia menyimpan material yang sama dalam memori yang jauh lebih sedikit dan men-decode-nya secara langsung saat render. VRAM adalah kendala yang terus-menerus seiring game mendorong detail tekstur, jadi "memuat material 8x lebih banyak dalam memori yang sama" adalah kemenangan langsung dan praktis, bukan gimmick visual.

Neural Shader dan DirectX Cooperative Vectors

Neural shader menjalankan jaringan saraf kecil di dalam shader yang dapat diprogram (program per-piksel/per-vertex yang sudah dijalankan GPU) sehingga sebuah jaringan dapat memperkirakan efek mahal yang dihitung tepat di tempat efek itu dibutuhkan. Alih-alih menempelkan AI sebagai pass terpisah, MLP berjalan sebagai bagian dari shader pada unit matriks GPU (Tensor Cores pada hardware NVIDIA).

Tensor Cores menangani matematika matriks yang menjadi landasan jaringan-jaringan ini, berbeda dari core serbaguna yang menangani sisa pekerjaannya. Hal yang mengubah neural shader dari fitur satu vendor menjadi kemampuan industri yang lebih luas adalah lapisan API di bawahnya. Microsoft memperkenalkan DirectX Cooperative Vectors dalam pratinjau bersama Shader Model 6.9 pada 2025 untuk mengekspos operasi vektor/matriks di dalam shader HLSL. Pada 2026, Shader Model 6.9 telah beralih ke versi rilis, dan Microsoft mengatakan Cooperative Vector sedang dihentikan demi desain aljabar linear yang lebih luas yang direncanakan untuk Shader Model 6.10. Kesimpulan yang aman bukanlah bahwa Cooperative Vectors adalah API final, melainkan bahwa DirectX bergerak menuju dukungan ML tingkat shader lintas-vendor.

Inti bagian: Keenam teknik terurut berdasarkan di mana jaringan berjalan: post-process di akhir frame, di tengah pipeline bersama ray tracing, atau di dalam shader itu sendiri. Lokasi itulah yang menentukan apakah sebuah teknik dapat berjalan secara real-time dan hardware mana yang dibutuhkannya.

Apa yang Berjalan Real-Time, dan di Hardware Apa

Chart showing real-time viability of neural rendering techniques by hardware requirement, from shipping game features to research-only full neural renderers

Garis real-time lebih tegas daripada yang disiratkan hype: upscaling AI biasanya berjalan dengan overhead rendah, NRC menambah kira-kira 2,6 ms, dan 3D Gaussian Splatting mendekati real-time untuk adegan statis. NeRF asli dan renderer neural penuh seperti RenderFormer tegas hanya untuk riset, memakan waktu terlalu lama per frame untuk penggunaan interaktif. "Neural rendering itu real-time" benar untuk lapisan dalam-pipeline dan salah untuk lapisan rekonstruksi dan renderer penuh.

Pembagian itu mengikuti spektrum dengan tepat. Beberapa komponen dalam-pipeline, terutama upscaling, frame generation, dan Ray Reconstruction, sudah berjalan dalam game yang dirilis. Yang lain, seperti NRC, NTC, dan neural shader, lebih tepat digambarkan sebagai teknologi pengembang dan fitur toolkit yang baru muncul, bukan fitur produksi yang umum. Lapisan rekonstruksi beragam: NeRF asli lambat, tetapi 3D Gaussian Splatting adalah dorongan sengaja menuju real-time dan mencapainya untuk adegan statis. Lapisan renderer neural penuh (satu jaringan yang menghasilkan seluruh gambar) adalah tempat riset berada dan waktu frame-nya sama sekali jauh dari interaktif.

Hardware adalah separuh jawaban lainnya, dan di sinilah cerita lintas-vendor berlabuh. Setiap teknik di sini berjalan pada unit matematika matriks yang disertakan GPU modern untuk inferensi AI:

  • NVIDIA memiliki Tensor Cores di setiap kartu RTX mulai dari seri 20 ke atas, itulah sebabnya sebagian besar teknik ini pertama kali muncul di sana.
  • AMD FSR Upscaling berbasis ML saat ini menargetkan GPU RDNA 4 / Radeon RX seri 9000 untuk jalur ML; pada hardware yang lebih lama, SDK AMD beralih ke jalur analitis FSR 3.1.5. Perlakukan dukungan GPU lama yang lebih luas sebagai item roadmap yang masih berubah, bukan fitur FSR 4 yang dijamin kecuali Anda mengutip pengumuman AMD yang spesifik.
  • Intel menggunakan mesin matriks XMX pada GPU Arc untuk XeSS.

DLSS sendiri dibatasi fiturnya berdasarkan generasi: upscaling berfungsi hingga seri RTX 20, frame generation asli membutuhkan seri RTX 40, dan multi-frame generation hanya untuk seri RTX 50. Jika Anda mencoba menalar apa yang bisa dilakukan kartu tertentu, pembatasan generasi itulah jawaban praktisnya, bukan tingkatan pemasaran.

Apa yang bisa Anda gunakan hari ini vs. apa yang akan datang: Upscaling, frame generation, dan Ray Reconstruction tersedia dalam game hari ini. Komponen RTX Kit seperti NRC, NTC, dan neural shader tersedia sebagai teknologi dan tooling pengembang, tetapi Anda tidak boleh menyiratkan bahwa semuanya sudah umum dalam game yang dirilis. Gaussian Splatting memiliki tooling terbuka yang dapat digunakan untuk penangkapan adegan. Apa yang belum ada di sini: renderer neural penuh yang menggambar seluruh frame dengan satu jaringan, neural shader lintas-vendor yang matang (dukungan AMD masih awal), dan fitur generatif DLSS 5 (diumumkan untuk Musim Gugur 2026). Jika Anda ingin bereksperimen dengan sisi rekonstruksi (menjalankan NeRF atau beban kerja inferensi sendiri), itu adalah pekerjaan GPU compute , bukan sesuatu yang dilakukan game Anda untuk Anda.

Apa yang Bukan Neural Rendering: Lima Miskonsepsi

Visual summary of five common neural rendering misconceptions and the clarifications that resolve each one

Sebagian besar argumen neural rendering menjadi lebih mudah begitu Anda mengidentifikasi lapisan spektrum mana yang menjadi inti klaim tersebut. Lima miskonsepsi muncul berulang kali.

1. "Upscaling DLSS adalah neural rendering." DLSS adalah an penerapan neural rendering, lapisan real-time dalam-pipeline, bukan keseluruhan bidangnya. Istilah ini ada sebelum DLSS dan mencakup NeRF, Gaussian Splatting, dan metode generatif. Menyamakan keduanya seperti menyebut "basis data" sebagai sinonim untuk satu produk yang kebetulan Anda gunakan.

2. "Frame generation membuat game lebih cepat." Ia meningkatkan jumlah frame yang Anda lihat, yang membuat gerakan tampak lebih halus, tetapi ia berjalan setelah rendering dan menambah latensi. Laju game diperbarui dan merespons input Anda tidak meningkat. Untuk permainan kompetitif, latensi itu adalah trade-off yang nyata; untuk kehalusan visual, itu adalah kemenangan sejati. "Lebih cepat" mencampuradukkan keduanya.

3. "DLSS 5 sadar-3D / membaca adegan 3D." Ini adalah hal yang paling layak dipahami dengan benar, karena liputan teknologi terus salah menggambarkannya. Seperti yang dijelaskan NVIDIA, DLSS 5 mengambil data warna setiap frame dan motion vector sebagai input, lalu menggunakan model terlatihnya untuk menyimpulkan semantik adegan seperti karakter, rambut, kain, kulit, dan kondisi pencahayaan. Ia berakar pada konten game, tetapi NVIDIA tidak menggambarkannya sebagai membaca file adegan 3D penuh game secara langsung. "Dipandu-3D" berarti inferensinya konsisten secara geometri (ia menghormati bagaimana permukaan bergerak dan berhubungan), bukan bahwa jaringan membaca geometri adegan secara langsung. Perbedaan itu penting karena membatasi apa yang bisa dan tidak bisa diketahui teknik tersebut.

4. "NeRF sudah real-time sekarang." Tergantung teknik mana yang Anda maksud, yang justru merupakan masalah spektrum. NeRF asli tidak real-time. 3D Gaussian Splatting mendekati real-time untuk adegan statis. Sistem riset yang merender frame penuh dengan satu jaringan (RenderFormer dan sejenisnya) sama sekali tidak real-time. "NeRF" telah menjadi istilah serba-guna untuk setengah lusin metode dengan kecepatan yang sangat berbeda.

5. "Neural rendering akan segera menggantikan rasterisasi." Sistem saat ini bersifat hibrida: komponen neural berada di dalam pipeline rasterisasi-dan-ray-tracing, bukan menggantikannya. Sepenuhnya menggantikan pipeline klasik dengan satu renderer generatif adalah tujuan riset jangka panjang, bukan arah produk jangka dekat. Anggap "masa depan sepenuhnya neural" sebagai arah perjalanan, bukan prediksi bertanggal.

Inti bagian: Satu akar penyebab dari hampir setiap ketidaksepakatan neural rendering adalah orang yang memakai kata yang sama untuk lapisan spektrum yang berbeda. Tempatkan klaim pada spektrum terlebih dahulu, dan sebagian besar argumennya akan lenyap.

Ke Mana Arahnya

Lintasannya konsisten dengan semua yang di atas: pipeline hibrida hari ini, lebih banyak tahap berpindah dari menghitung ke memprediksi, neural shader lintas-vendor yang memperluas siapa yang bisa merilis ini, dan perbatasan renderer neural penuh yang masih bertahun-tahun lagi. Langkah konsumen berikutnya adalah DLSS 5, diumumkan untuk Musim Gugur 2026, yang mendorong ke neural rendering generatif dengan menghasilkan detail pencahayaan dan material yang tidak pernah dihitung game, alih-alih hanya menginterpolasi antara frame yang dirender. NVIDIA telah menunjukkan teknologi ini dalam konteks seri RTX 50, tetapi persyaratan hardware konsumen finalnya harus dianggap belum terkonfirmasi sampai NVIDIA menerbitkan daftar kompatibilitas yang jelas.

Pandangan ke depan memiliki dua bagian. Di sisi dekat, langkah yang paling penting bukanlah satu teknik mana pun. Melainkan standarisasi. Jalur DirectX dari Microsoft bergerak dari Cooperative Vectors menuju aljabar linear tingkat shader yang lebih luas, yang bisa memungkinkan engine menargetkan beban kerja bergaya neural tanpa bertaruh pada satu merek GPU. Di sisi jauh, para peneliti NVIDIA telah menggambarkan titik akhir jauh di masa depan, yang kadang dilontarkan sebagai "DLSS 10" hipotetis, di mana renderer sepenuhnya neural dan pipeline klasik telah hilang (dilaporkan secara tidak langsung dari roundtable Digital Foundry; anggap sebagai arah yang dinyatakan, bukan roadmap). Titik akhir dari tangga itu adalah sistem yang menghasilkan dunia yang koheren alih-alih menggambarnya.

Namun, skeptisisme tetap layak dipertahankan. Detail hasil generasi bisa menyimpang dari maksud artistik, dan sebuah jaringan bisa berhalusinasi menghasilkan visual yang masuk akal-tetapi-salah yang tidak punya padanan tradisional untuk di-debug: masalah QA yang ditandai di GDC 2026, dan substansi di balik banyaknya reaksi "AI slop". Membangun untuk ke mana arah grafis tidak berarti berpura-pura bahwa keluaran saat ini sudah selesai. Itu berarti memperhatikan tahap mana yang berpindah dari menghitung ke memprediksi berikutnya, dan menilai masing-masing berdasarkan apa yang dilakukannya terhadap gambar alih-alih berdasarkan kata yang dilekatkan padanya.

Pertanyaan yang Sering Diajukan

Apakah DLSS Itu Neural Rendering?

Ya, tetapi itu hanya satu jenis. DLSS adalah penerapan neural rendering: khususnya lapisan real-time dalam-pipeline, mencakup upscaling AI dan frame generation. Istilah yang lebih luas ada sebelum DLSS dan juga mencakup metode rekonstruksi adegan seperti NeRF dan Gaussian Splatting serta metode generatif yang menciptakan detail gambar baru. Jadi setiap fitur DLSS adalah neural rendering, tetapi banyak neural rendering yang bukan DLSS.

Apa Perbedaan Antara Neural Rendering dan Ray Tracing?

Ray tracing menyimulasikan cahaya dengan menghitung bagaimana sinar memantul melalui sebuah adegan; neural rendering memprediksi hasil dari jaringan terlatih alih-alih menghitungnya. Keduanya bukan rival. Keduanya berpadu. Ray Reconstruction, misalnya, menggunakan jaringan saraf untuk men-denoise keluaran ray-traced yang berisik, dan neural radiance cache memprediksi cahaya pantulan sehingga ray tracer bisa berhenti lebih awal. Teknik neural membuat ray tracing terjangkau secara real-time.

Apakah DLSS Frame Generation Menambah Latensi?

Ya. Frame generation berjalan setelah sebuah frame dirender dan menyisipkan frame hasil prediksi di antara frame yang dirender, yang menambah latensi alih-alih menghilangkannya: Reflex 2 dari NVIDIA hadir khusus untuk mengompensasinya. Ia meningkatkan kehalusan yang dirasakan (lebih banyak frame ditampilkan) tanpa meningkatkan seberapa cepat game diperbarui dan merespons input. Untuk permainan kompetitif itu adalah trade-off; untuk kehalusan single-player itu biasanya kemenangan bersih.

Apakah NeRF Itu Real-Time?

Tergantung teknik mana yang Anda maksud. NeRF asli tidak real-time. 3D Gaussian Splatting, metode yang lebih baru, mendekati real-time untuk adegan statis. Renderer neural penuh yang menggambar seluruh frame dengan satu jaringan hanya untuk riset dan jauh dari kecepatan interaktif. "NeRF" sering digunakan secara longgar untuk mencakup beberapa metode dengan performa yang sangat berbeda, yang menjadi sumber sebagian besar kebingungan.

Apakah Neural Rendering Akan Menggantikan Rasterisasi?

Tidak dalam waktu dekat. Sistem saat ini bersifat hibrida: komponen neural berjalan di dalam pipeline rasterisasi-dan-ray-tracing, bukan menggantikannya. Mengganti pipeline klasik sepenuhnya dengan satu renderer generatif adalah tujuan riset jangka panjang, bukan produk jangka dekat. Arah yang realistis adalah lebih banyak tahap pipeline berpindah dari dihitung ke diprediksi seiring waktu, dengan rasterisasi yang masih melakukan pekerjaan nyata selama bertahun-tahun.

Apa Itu Neural Texture Compression?

Neural texture compression (NTC) adalah metode neural yang mengompresi semua channel tekstur dari sebuah material secara bersamaan (warna, normal, roughness, dan sisanya), mencapai penghematan VRAM hingga 8x dibandingkan kompresi blok tradisional pada kualitas visual yang serupa, menurut NVIDIA. Ia bekerja dengan mempelajari korelasi antar channel yang dibuang oleh kompresi blok, yang memampatkan setiap channel secara terpisah. Material terkompresi tersebut di-decode secara langsung saat render.

Share

Lebih banyak dari blog

Lanjutkan membaca.

Siap deploy? Mulai $2,48/bln.

Cloud independen, sejak 2008. AMD EPYC, NVMe, 40 Gbps. Garansi uang kembali 14 hari.