Kā neiroķīmete uzlabo attēlu spēlēs? Par DLSS tehnoloģiju

Anonim
Kā neiroķīmete uzlabo attēlu spēlēs? Par DLSS tehnoloģiju 1908_1
Kā neiroķīmete uzlabo attēlu spēlēs? Par DLSS tehnoloģiju 1908_2
Kā neiroķīmete uzlabo attēlu spēlēs? Par DLSS tehnoloģiju 1908_3
Kā neiroķīmete uzlabo attēlu spēlēs? Par DLSS tehnoloģiju 1908_4
Kā neiroķīmete uzlabo attēlu spēlēs? Par DLSS tehnoloģiju 1908_5

Kad amerikāņu kaujinieki attēlos no satelīta, īpašie aģenti palielināja skaitu auto uz pilnībā lasīt stāvokli, mēs smējās. Boss stāv virs datora, padara to mērogošanu, un pēc tam "uzlabot" attēlu. Tādā mērā, ka informācija parādās monitorā, kas faktiski nevar tikt iekļauta attēlā. Cilvēkiem, kas ir vairāk vai mazāk izjaukuši fotogrāfiju apstrādē, šķita fantastiski. Jā, un šodien, principā tas joprojām ir fantastisks. Bet! NVIDIA DLSS tehnoloģija padara šo fantastiku nedaudz tuvāk realitātei.

Kad NVIDIA iepazīstināja ar jauno paaudzi video kartēm uz mikroarhitektūras, galvenais fokuss Gamers bija vērsta uz Ray Trace: RTX video kartes no 2000 sērijas kļuva par pirmo, lai atbalstītu šo tehnoloģiju aparatūras līmenī, jo RT kodols.

Bet arī "Thuringami" bija arī tenzora kodoli. Viņi, izmantojot dziļās mācīšanas rezultātus neironu tīklu, uzlaboja izlīdzināšanu, palielināja spēli radīto attēla veiktspēju un izšķirtspēju. Tehnoloģija saņēma DLSS nosaukumu - Deep Lerning Super paraugu.

Faktiski, tas ir viens no uzlabotiem izlīdzināšanas tehnoloģiju veidiem spēlēs. Datoru spēlētāji ir pazīstami ar viņiem noslēpumainā TAA, FXAA, MSAA, 8x, 4x utt. Attēla iestatījumos spēlē. Izmantojot šos noslēpumainos saīsinājumus, ir dažādas izlīdzināšanas attēlu variācijas. Tas sastāv no pikseļiem, visas rāmja līnijas sastāv no šiem pikseļiem, bet ar kvadrātu palīdzību, lai pievērstu diagonālo līniju, nav viegli, tas tiks parādīts ar kāpnēm. Un, kad šādas līnijas un dāmas uz daudzstūru robežām uz ekrāna daudz, attēls sāk bagātināt acis.

Visas izlīdzināšanas tehnoloģiju dažādība ir iesaistīta šo dāmu noņemšanā, lai izmērītu pielāgotā datora spējas un spēku. Viņi maina pikseļu krāsu uz robežām un padarīt pārejas vienmērīgākas. Dažādos veidos dažādos veidos, dzelzs iekraušana un nedaudz atšķirīga gala rezultāta parādīšana līdz attēla skulptūrai. Bet mums nav stāsta par visu šo kolektoru, kurā jūs varat viegli saņemt bogged uz leju, bet par iesācēju, kurš nolēma pārvērst spēli no kājām uz galvas: lai nodrošinātu skaidru priekšstatu un izkraut dzelzs.

Magic darbībā

Pirmā DLSS tehnoloģijas itācija bija neskaidra un lielā mērā ierobežota. Viņa pieprasīja apmācīt mākslīgo intelektu saskaņā ar katru jaunu spēli, atbalstīt no izstrādātājiem, regulāri pabeidzot un atbrīvot īpašus draiverus video kartei ar spēles izlaišanu. Piemēram, 2019. gada spēles kontrole, sākotnējā tehnoloģija palielināja rāmja izmaiņas biežumu līdz 70%. Lielākajā daļā ainas attēla kvalitāte bija lieliska, bet kustīgās iespējas radīja daudz problēmu. Sākotnējās DLSS, piemēram, nebija viegli tikt galā ar turbīnu asmeņiem, kas vērpj vienā no spēles ainas. Bija arī problēmas ar mazo detaļu robežām rāmī.

2020. gada pavasarī NVIDIA izlaida DLSS versiju 2.0 un kontrole atkal parādīja savu progresu. Tur tas bija jau ar asmeņiem, viss bija kārtībā, un mazie objekti kļuva skaidrs, robežas kļuva asāka un novilkta un palielināja vispārējo veiktspēju spēli.

Mākslīgais intelekta modelis tika pārstrādāts, kas kļuva divreiz tik strauji kā sākotnējā versija. Tas efektīvāk izmanto TENSOR kodolus, novērš atbalstīto video karšu, kvalitātes un atļauju skaita ierobežojumu.

Sākotnējā tehnoloģija pieņēma neironu tīkla apmācību katrā jaunajā spēlē. DLSS 2.0 ir kļuvis daudzpusīgāks, tas ir kļuvis vieglāk īstenot spēlēs.

Kā šis burvju darbs? NVIDIA ir īpaša sistēma, kas māca dziļu neironu tīklu. Apmācība ir tāda, ka neironu tīkli baro desmitiem tūkstošu atsauces attēlu augstā izšķirtspējā. Tiešām augsta - 16k. Šos attēlus rada spēcīgs superdators bezsaistes rāmju rāmju rāmja izciršanas laikā. Pateicoties šim izkliedējumam, neirallets pēc tam balstās uz avota attēlu zemas kvalitātes, kas spēj izveidot rāmi augstas izšķirtspējas jau lietotāja ierīcē. Šajā sakarā tā balstās uz apmācības laikā iegūtajām zināšanām.

Ja neironu tīkls pati rada rāmjus no zema izšķirtspējas paraugiem, tos salīdzina ar standartiem 16K rezolūcijā, un par visām atšķirībām un shoals tiek ziņots atpakaļ neironu tīklu. Ar katru ciklu samierināšanās ir noregulēta un uzlabo tās rezultātus. Galīgais autovadītāju veidā nokļūt pasūtījuma video kartēs, un maģija sāk rasties spēlēs.

Par pareizu darbību DLSS 2.0 neironu tīklu, tas ir nepieciešams ievadi. To spēļu dzinējs nodrošina. Pirmā datu daļa ir attēls zemā izšķirtspējā bez izlīdzināšanas. Šo attēlu otrā - vektori. Vektori ir informācija par to, kādas virziena objekti šajā rāmī pārvietojas šajā kadrā. Būtībā tas ir tāda karte kustību pikseļu ar rāmi.

Neuraleta rada rāmi augstas izšķirtspējas un zinot, ka tās pārmaiņu vektori palielina nākamā rāmja atļauju. Burtiski pixelly nosaka, kā palielināt izšķirtspēju nākamajā kadrā.

Īstenošanas prepans

Attiecībā uz pirmo atkārtojumu, DLSS spēļu izstrādātājiem bija jāstrādā ciešā sadarbībā ar NVIDIA, lai pievienotu atbalstu savai spēlei. Izlādes dzinējam bija nepieciešams daudz attēlu no spēles. Otrā DLSS versija ir kļuvusi pieejamāka, tā mācās parastiem attēliem, viņai nav vajadzīgi ievada dati no konkrētas spēles.

Pateicoties tam atbalstīto spēļu saraksts ir paplašinājies līdz trim desmitiem, savukārt sākotnējā DLSS bija mazāk nekā desmit.

Šā gada sākumā NVIDIA ir izlaidusi spraudni, lai īstenotu DLSS uz spēli Unreal Marketplace - apmaksāts un bezmaksas brauciena veikals spēļu izstrādātājiem par nereālu dzinēja dzinēju. Bet daudzi izstrādātāji nav steigā ar savu papildinājumu savām spēlēm. Tas lielā mērā ir saistīts ar 4K monitoru izplatību spēlētājiem. Tomēr iespaidīgākie DLSS 2.0 izskatās 4K izšķirtspējā. Tur tehnoloģija ļauj sasniegt ievērojamu produktivitātes pieaugumu, ļauj RTX video kartēm no 2000. sērijas un sākotnējā līmenī, lai parādītu stabilu un spēļu sistēmu, salīdzinot ar uzturvērtības izšķirtspēju 4K.

Bet fakts ir tāds, ka lielākā daļa geimeru joprojām spēlē 1080 pikseļu risināšanā - ir vairāk nekā 67% tvaika lietotāju. Otrā izšķirtspēja ir klēpjdators: 1366 × 768 pikseļi - 8% lietotāju. Trešajā vietā ar nelielu fragmentu, pielāgotus ekrānus ar izšķirtspēju 2560 × 1440 pikseļi. 4K monitori joprojām ir daudz entuziastu: nedaudz vairāk nekā 2% tvaika lietotāju.

Konkurents no AMD.

DLSS - NVIDIA patentēta tehnoloģija. Tas darbojas tikai uz RTX sērijas video kartēm, kurām ir tenzora kodoli. Tie tiek aprēķināti saistībā ar mākslīgo intelekta algoritmiem. NVIDIA galvenā konkurents - AMD strādā pie viņa alternatīvas DLSS, ko sauc par FidelityFX Super Resolution. Bet līdz šim ir praktiski nav konkrētas informācijas par šo attīstību.

Ir zināms tikai tas, ka "sarkanajam" būs svarīga priekšrocība. AMD apsolīja padarīt atvērtu un starpplatformu tehnoloģiju. Tas nozīmē, ka tehnoloģija var ierasties jaunās paaudzes konsolē, kas izmanto RDNA 2 grafisko arhitektūru no AMD.

Nesen, AMD organizēja jaunu Radeon RX 6700 XT video kartes prezentāciju. Daudzi cerēja, ka šajā gadījumā tiks informēts par FidelityFX Super Resolution. Sānu malās prezentācijas paskaidroja, ka AMD nav steigā ar tehnoloģiju izlaišanu vienā augšējā kartē, un tā vietā vēlas, lai tas būtu visās pārrobežu platformas nozīmē.

AMD tehnoloģijai jābūt nedaudz līdzīgai DLSS. Un tāpēc, ka potenciālā neironu tīkla izlīdzināšanas klātbūtne PS5 un Xbox sērijā ir liela interese, jo tālu no visām spēlēm tās var parādīt 60 kadrus sekundē 4K izšķirtspējā.

Bet visi šie argumenti paliek tikai spekulācijas. Iespējams, līdz šā gada beigām AMD joprojām pastāstīs vairāk par tās attīstību. Tikmēr turpiniet nodrošināt, ka spēle varēs īstenot DLSS savā produktos.

Mūsu kanāls telegrammā. Pievienojies tagad!

Vai ir kaut kas pateikt? Rakstiet mūsu telegrammas botam. Tas ir anonīmi un ātri

Atkārtota teksta un fotogrāfiju Onliner, neatrisinot redaktorus, ir aizliegts. [email protected].

Lasīt vairāk