Como a neurossette melhora a imagem em jogos? Sobre a tecnologia DLSS.

Anonim
Como a neurossette melhora a imagem em jogos? Sobre a tecnologia DLSS. 1908_1
Como a neurossette melhora a imagem em jogos? Sobre a tecnologia DLSS. 1908_2
Como a neurossette melhora a imagem em jogos? Sobre a tecnologia DLSS. 1908_3
Como a neurossette melhora a imagem em jogos? Sobre a tecnologia DLSS. 1908_4
Como a neurossette melhora a imagem em jogos? Sobre a tecnologia DLSS. 1908_5

Quando em militantes americanos nas fotos do satélite, os agentes especiais aumentaram o número do carro para o estado totalmente lido, rimos. O chefe está acima do computador, torna escalonando e "melhorar" uma imagem. A tal ponto que a informação apareça no monitor, que não pode ser realmente contida na imagem. Para pessoas que são mais ou menos desmontadas no processamento de fotografia, parecia fantástico. Sim, e hoje, em princípio, permanece fantástico. Mas! NVIDIA DLSS Technology torna este fantástico um pouco mais perto da realidade.

Quando a NVIDIA apresentou uma nova geração de placas de vídeo na microarquitetura, o foco principal dos jogadores foi focado no Ray Trace: As placas de vídeo RTX da série de 2000 se tornaram a primeira a suportar essa tecnologia no nível de hardware devido à RT núcleo.

Mas também em "Thuringami" também houve kernels tensores. Eles, usando os resultados do ensino profundo, a rede neural melhorou a suavização, aumentou o desempenho e a resolução da imagem que é criada pelo jogo. Tecnologia recebeu um nome de DLS - profunda amostra super de lerning.

Na verdade, é um dos tipos avançados de tecnologia de suavização em jogos. Os jogadores de computação estão familiarizados com eles em Taa misterioso, FXAA, MSAA, 8X, 4X, etc. nas configurações da foto no jogo. Através dessas misteriosas abreviaturas, várias variações de alisamento de fotos mentem. Consiste em pixels, todas as linhas no quadro consistem nesses pixels, mas com a ajuda de quadrados para desenhar uma linha diagonal não é fácil, ele será exibido com senhores. E quando tais linhas e senhoras nas fronteiras dos polígonos na tela muito, a imagem começa a rica nos olhos.

Toda a variedade de tecnologias de suavização está envolvida na remoção dessas senhoras para medir suas capacidades e poder de um computador personalizado. Eles mudam a cor dos pixels nas bordas e fazem transições mais suaves. Maneiras diferentes, de diferentes maneiras, carregando ferro e demonstrando um resultado final ligeiramente diferente até a escultura da imagem. Mas não temos uma história sobre todo esse manifold, no qual você pode facilmente ficar atolado, mas sobre um novato que decidiu transformar o jogo das pernas na cabeça: para fornecer uma imagem clara e descarregar ferro.

Magia em ação

A primeira iteração da tecnologia DLSS foi ambígua e em grande parte limitada. Ela exigiu treinamento inteligência artificial em cada novo jogo, suporte de desenvolvedores por acabamento regular e liberação de drivers especiais para a placa de vídeo com a liberação do jogo. Por exemplo, no Controle de Jogo de 2019, a tecnologia original levantou a frequência de mudança de quadros até 70%. Na maioria das cenas, a qualidade da imagem foi excelente, mas as instalações em movimento trouxeram muitos problemas. O DLS original, por exemplo, não foi fácil lidar com as lâminas da turbina, que girando em uma das cenas do jogo. Também houve problemas com os limites de pequenos detalhes no quadro.

Na primavera de 2020, a NVIDIA lançou a versão do DLSS 2.0 e o controle mostrou novamente para demonstrar seu progresso. Lá já estava com as lâminas, tudo estava em ordem, e pequenos objetos ficaram mais claros, os limites tornaram-se mais nítidos e desenhados e aumentaram o desempenho geral do jogo.

O modelo de inteligência artificial foi retrabalhado, o que se tornou duas vezes mais rápido que a versão original. Ele usa kernels de tensor de forma mais eficiente, elimina o limite no número de placas de vídeo suportadas, qualidade e permissões.

A tecnologia original assumiu o treinamento de uma rede neural sob cada novo jogo. O DLSS 2.0 se tornou mais versátil, tornou-se mais fácil implementar em jogos.

Como esta mágica funciona? A NVIDIA tem uma estrutura especial, que ensina a rede neural profunda. O treinamento é que as redes neurais alimentam dezenas de milhares de imagens de referência em alta resolução. Muito alto - 16k. Essas imagens são criadas por um supercomputador poderoso durante a prestação offline de um quadro de baixa frequência de quadros. Graças a essa dispersão, a Neurallet é posteriormente baseada na imagem de origem em baixa qualidade capaz de criar um quadro em alta resolução já em um dispositivo de usuário. Nisso, depende do conhecimento adquirido durante o treinamento.

Quando a própria rede neural cria quadros de amostras de baixa resolução, eles são comparados com os padrões em resolução de 16k e sobre todas as diferenças e cardumes são relatados de volta a rede neural. Com cada ciclo, a reconciliação é ajustada e melhora seus resultados. A final na forma de motoristas chegam a placas de vídeo personalizadas e a magia começa a ocorrer em jogos.

Para a operação correta da rede neural DLSS 2.0, ele precisa de entrada. Seu motor de jogos fornece. A primeira parte dos dados é uma imagem em baixa resolução sem suavizar. Segundo - vetores de movimento para essas imagens. Vetores são informações sobre quais objetos de direção neste quadro estão se movendo neste quadro. Em essência, este é um tipo de movimento de movimentos de pixels por quadro.

Neuraleta cria um quadro em alta resolução e, conhecendo os vetores de sua mudança, nesta base, aumenta a permissão do próximo quadro. Literalmente pixelly determina como aumentar a resolução no próximo quadro.

Prepans de implementação

No caso da primeira iteração, os desenvolvedores de jogos da DLS tiveram que trabalhar em estreita cooperação com a NVIDIA para adicionar apoio ao seu jogo. O motor de descarga exigia muitas imagens do jogo. A segunda versão do DLSS tornou-se mais acessível, está estudando em imagens comuns, ela não precisa de dados introdutórios de um determinado jogo.

Graças a isso, a lista de jogos suportados se expandiu para três dúzias, enquanto a DLS original tinha menos de dez.

No início deste ano, a NVIDIA lançou um plugin para implementar o DLSs para o jogo no Marketplace Unreal - uma loja de passeio paga e gratuita para desenvolvedores de jogos no mecanismo irreal. Mas muitos desenvolvedores não estão com pressa com sua adição aos seus jogos. Isso é em grande parte devido à prevalência de monitores 4K em gamers. Ainda assim, o DLSS mais impressionante aparência na resolução 4K. Lá, a tecnologia permite que você atinja um crescimento significativo de produtividade, permite que as placas de vídeo RTX da série de 2000 e o nível inicial exibam uma estrutura estável e de reprodução em comparação com a resolução nutricional em 4K.

Mas o fato é que a maioria dos geimers ainda está jogando na resolução de 1080 pixels - há mais de 67% desses usuários no Steam. A segunda resolução é um laptop: 1366 × 768 pixels - 8% dos usuários. Em terceiro lugar com uma pequena passagem, telas personalizadas com uma resolução de 2560 × 1440 pixels. Os monitores 4k ainda permanecem muitos entusiastas: um pouco mais de 2% dos usuários a vapor.

Concorrente da AMD.

DLSS - tecnologia proprietária NVIDIA. Ele funciona apenas nas placas de vídeo da série RTX, que têm kernels de tensoros. Eles são calculados relacionados a algoritmos de inteligência artificial. Nvidia Principal Rival - AMD está trabalhando em sua alternativa ao DLSS, que é chamado de resolução super de FidelityFX. Mas até agora não há nenhuma informação específica sobre esse desenvolvimento.

Sabe-se somente que o "vermelho" terá uma vantagem importante. AMD prometeu tornar a tecnologia de abertura e plataforma cruzada. Isso significa que a tecnologia pode chegar ao console da nova geração, que usa a arquitetura gráfica RDNA 2 da AMD.

Recentemente, a AMD organizou uma apresentação da nova placa de vídeo Radeon RX 6700 XT. Muitos esperavam que durante este evento fosse informado sobre a resolução da FidelityFX. Nas paredes laterais, as apresentações explicaram que a AMD não está com pressa com a liberação de tecnologia para uma carta superior e, em vez disso, quer que seja em todos os sentidos de plataforma cruzada.

A tecnologia AMD deve ser um pouco semelhante ao DLSs. E porque a presença potencial de suavização de rede neural em consoles PS5 e Xbox Series é de grande interesse, tanto longe de todos os jogos, eles podem mostrar 60 quadros por segundo em resolução 4K.

Mas todos esses argumentos permanecem apenas especulações. Talvez, até o final deste ano, a AMD ainda contará mais sobre o seu desenvolvimento. Entretanto, continue a garantir que o jogo seja capaz de implementar o DLSs em seus produtos.

Nosso canal no telegrama. Entrar!

Há algo para dizer? Escreva para o nosso telegram-bot. É anonimamente e rápido

Reimprimir texto e fotos onliner sem resolver os editores é proibido. [email protected].

Consulte Mais informação