Come fa Neurosette Migliora l'immagine nei giochi? Sulla tecnologia DLSS.

Anonim
Come fa Neurosette Migliora l'immagine nei giochi? Sulla tecnologia DLSS. 1908_1
Come fa Neurosette Migliora l'immagine nei giochi? Sulla tecnologia DLSS. 1908_2
Come fa Neurosette Migliora l'immagine nei giochi? Sulla tecnologia DLSS. 1908_3
Come fa Neurosette Migliora l'immagine nei giochi? Sulla tecnologia DLSS. 1908_4
Come fa Neurosette Migliora l'immagine nei giochi? Sulla tecnologia DLSS. 1908_5

Quando nei militanti americani nelle immagini del satellite, gli agenti speciali hanno aumentato il numero della macchina allo stato completamente letto, abbiamo riso. Il capo è in piedi sopra il computer, lo rende ridimensionamento, e quindi "migliorare" un'immagine. A tal punto che le informazioni appaiono sul monitor, che non possono effettivamente essere contenute nell'immagine. Per le persone che sono più o meno smontato nell'elaborazione della fotografia, sembrava fantastica. Sì, e oggi, in linea di principio, rimane fantastico. Ma! La tecnologia NVIDIA DLSS rende questo fantastico un po 'più vicino alla realtà.

Quando Nvidia ha presentato una nuova generazione di schede video sulla microarchitettura Turing, l'obiettivo principale dei giocatori è stato focalizzato sulla traccia dei raggi: le schede video RTX della serie 2000 sono diventate il primo a supportare questa tecnologia a livello hardware a causa del RT nucleo.

Ma anche in "Thuringami" c'erano anche i kernel tensori. Loro, utilizzando i risultati dell'insegnamento profondo della rete neurale, ha migliorato il levigatore, ha aumentato le prestazioni e la risoluzione dell'immagine creata dal gioco. La tecnologia ha ricevuto un nome DLSS - super generning super-campione.

In effetti, è uno dei tipi avanzati di tecnologia levigatura nei giochi. I giocatori di computer hanno familiarità con loro su misterioso TAA, FXAA, MSAA, 8x, 4x, ecc. Nelle impostazioni dell'immagine del gioco. Attraverso queste misteriose abbreviazioni, varie varianti delle immagini leviganti mentono. Consiste di pixel, tutte le linee nel telaio consistono in questi pixel, ma con l'aiuto dei quadrati per disegnare una linea diagonale non è facile, verrà visualizzato con le cadenze. E quando tali linee e signore sui confini dei poligoni sullo schermo molto, l'immagine inizia a ricchi negli occhi.

Tutta la varietà di tecnologie leviganti è impegnata a rimuovere queste signore per misurare le loro capacità e potenza di un computer personalizzato. Cambiano il colore dei pixel sui confini e rendono le transizioni più liscia. Diversi modi, in modi diversi, caricando il ferro e dimostrando un risultato estremità leggermente diverso fino alla scultura dell'immagine. Ma non abbiamo una storia su tutto questo collettore, in cui puoi facilmente impantanarsi, ma su un novizio che ha deciso di girare il gioco dalle gambe sulla testa: per fornire un'immagine chiara e scaricare ferro.

Magia in azione

La prima iterazione della tecnologia DLSS è stata ambigua e in gran parte limitata. Ha chiesto di addestrare la formazione di intelligence artificiale sotto ogni nuovo gioco, il supporto degli sviluppatori per finitura regolare e rilascio di driver speciali per la scheda video con il rilascio del gioco. Ad esempio, nel controllo del gioco 2019 anni, la tecnologia originale ha sollevato la frequenza del cambio del telaio fino al 70%. Nella maggior parte delle scene, la qualità dell'immagine era eccellente, ma le strutture in movimento hanno portato molti problemi. L'originale DLSS, ad esempio, non era facile da affrontare le lame della turbina, che gira in una delle scene del gioco. Ci sono stati anche problemi con i confini dei piccoli dettagli nel telaio.

Nella primavera del 2020, NVIDIA ha rilasciato la versione di DLSS 2.0 e il controllo ha dimostrato di nuovo per dimostrare i loro progressi. Eccolo già con le lame, tutto era in ordine, e piccoli oggetti sono diventati più chiari, i confini divennero più nitidi e disegnati e aumentarono le prestazioni generali del gioco.

Il modello di intelligenza artificiale è stato rielaborato, che è diventato due volte più veloce della versione originale. Utilizza i kernel del tensor in modo più efficiente, elimina il limite del numero di schede video, qualità e autorizzazioni supportate.

La tecnologia originale ha assunto la formazione di una rete neurale sotto ogni nuovo gioco. DLSS 2.0 è diventato più versatile, è diventato più facile da implementare nei giochi.

Come funziona questo magico? NVIDIA ha un quadro speciale, che insegna una rete neurale profonda. La formazione è che le reti neurali mangiano decine di migliaia di immagini di riferimento in alta risoluzione. Davvero alto - 16k. Queste immagini sono create da un potente supercomputer durante il rendering offline di un telaio a bassa frequenza di cornici. Grazie a questa dispersione, Neurollet è successivamente basato sull'immagine sorgente in bassa qualità in grado di creare un telaio in alta risoluzione già su un dispositivo utente. In questo, si basa sulla conoscenza acquisita durante l'allenamento.

Quando la rete neurale crea in sé fotogrammi da campioni a bassa risoluzione, vengono confrontati con gli standard nella risoluzione 16K e su tutte le differenze e le shoal sono riportate indietro nella rete neurale. Con ogni ciclo, la riconciliazione è sintonizzata e migliora i suoi risultati. La finale sotto forma di conducenti arriva a schede video personalizzate e la magia inizia a verificarsi nei giochi.

Per il corretto funzionamento della rete neurale DLSS 2.0, ha bisogno di input. Il loro motore da gioco fornisce. La prima porzione dei dati è un'immagine a bassa risoluzione senza levigatura. Second - Vettori di movimento per queste immagini. I vettori sono informazioni su quali oggetti di direzione su questo telaio si stanno muovendo in questo fotogramma. In sostanza, questa è una tale mappa di movimenti di pixel per fotogramma.

La neuratura crea una cornice in alta risoluzione e, conoscendo i vettori del suo cambiamento, su questa base aumenta il permesso del telaio successivo. Letteralmente determina pixelly come aumentare la risoluzione nel prossimo fotogramma.

Preparazioni di implementazione

Nel caso della prima iterazione, gli sviluppatori di giochi DLSS hanno dovuto lavorare in stretta collaborazione con NVIDIA per aggiungere supporto al loro gioco. Il motore di scarico richiedeva molte immagini dal gioco. La seconda versione di DLSS è diventata più accessibile, sta studiando sulle immagini comuni, non ha bisogno di dati introduttivi da un particolare gioco.

Grazie a questo, l'elenco dei giochi supportati si è ampliata a tre dozzine, mentre il DLSS originale aveva meno di dieci.

All'inizio di quest'anno, NVIDIA ha rilasciato un plug-in per implementare il DLSS al gioco nel mercato irreale - un negozio a pagamento e gratuito per gli sviluppatori di giochi sul motore del motore irreale. Ma molti sviluppatori non hanno fretta con la sua aggiunta ai loro giochi. Questo è in gran parte dovuto alla prevalenza dei monitor 4K nei giocatori. Tuttavia, il DLSS 2.0 più impressionante si affaccia nella risoluzione 4K. Lì, la tecnologia ti consente di ottenere una crescita significativa della produttività, consente alle schede video RTX della serie 2000 e del livello iniziale per mostrare un quadro stabile e di gioco rispetto alla risoluzione nutrizionale in 4K.

Ma il fatto è che la maggior parte dei geimer sta ancora giocando nella risoluzione di 1080 pixel - ci sono più del 67% di tali utenti a vapore. La seconda risoluzione è un laptop: 1366 × 768 pixel - 8% degli utenti. In terzo posto con un piccolo passaggio, schermi personalizzati con una risoluzione di 2560 × 1440 pixel. I monitor 4K rimangono ancora molti appassionati: un po 'più del 2% degli utenti di Steam.

Concorrente da AMD.

DLSS - NVIDIA Tecnologia proprietaria. Funziona solo sulle schede video della serie RTX, che hanno un kernel del tensor. Sono calcolati relativi agli algoritmi di intelligenza artificiale. NVIDIA Principale rivale - AMD sta lavorando alla sua alternativa a DLSS, che si chiama FidelityFX Super Risoluzione. Ma finora non ci sono praticamente informazioni specifiche su questo sviluppo.

È noto solo che il "rosso" avrà un vantaggio importante. AMD ha promesso di rendere la tecnologia di aperta e multipiattaforma. Ciò significa che la tecnologia può arrivare alla console della nuova generazione, che utilizza l'architettura grafica RDNA 2 da AMD.

Recentemente, AMD ha organizzato una presentazione della nuova scheda video Radeon RX 6700 XT. Molti speravano che durante questo evento sarebbe stato detto sulla risoluzione di FidelityFX Super. Nelle fianchi, le presentazioni hanno spiegato che AMD non ha fretta con il rilascio della tecnologia per una migliore carta, e invece vuole che sia in ogni senso di multipiattaforma.

La tecnologia AMD deve essere un po 'simile a DLSS. E poiché la potenziale presenza della rete neurale levigatura sulle console PS5 e Xbox Series è di grande interesse, per quanto lontano da tutti i giochi possono mostrare 60 fotogrammi al secondo in risoluzione 4K.

Ma tutti questi argomenti rimangono solo speculazioni. Forse, entro la fine di quest'anno, AMD racconterà ancora di più sul suo sviluppo. Nel frattempo, continuare a garantire che il gioco sarà in grado di implementare DLSS nei loro prodotti.

Il nostro canale in Telegram. Iscriviti adesso!

C'è qualcosa da dire? Scrivi al nostro telegramma. È anonimo e veloce

La ristampa di testo e foto onliner senza risoluzione dei redattori è vietata. [email protected].

Leggi di più