NVIDIA prevê DLSS 10 como um sistema de renderização neural completo com interface com motores de jogo

A NVIDIA anunciou o DLSS (abreviação de Deep Learning Super Sampling) em 2018 como uma nova técnica de renderização de vídeo. A cada iteração, o DLSS evoluiu e a NVIDIA prevê que o DLSS 10 no futuro poderá lidar com todos os aspectos da renderização usando IA.

Em uma mesa redonda recente sobre AI Visuals organizada pela Digital Foundry , o vice-presidente de pesquisa aplicada de aprendizado profundo da NVIDIA, Bryan Catanzaro, foi questionado sobre seus pensamentos sobre o futuro do DLSS e as áreas problemáticas que o aprendizado de máquina poderia resolver. Em resposta, ele afirmou:

Eu não acredito que a IA vá construir jogos de uma forma em que você apenas escreve um parágrafo sobre como fazer um jogo cyberpunk e então o pop lança algo tão bom quanto Cyberpunk 2077. Eu acho que digamos que o DLSS 10 em um futuro distante irá será um sistema de renderização completamente neural que interage com um motor de jogo de diferentes maneiras e, por isso, será mais envolvente e mais bonito.

Ele mencionou uma demonstração anterior de um mundo renderizado por uma rede neural e impulsionado por um mecanismo de jogo.

Em 2018, na conferência NeurIPS, montamos uma demonstração muito legal de um mundo que estava sendo renderizado por uma rede neural, tipo, completamente, mas estava sendo conduzido por um motor de jogo.

Então, basicamente, o que estávamos fazendo era usar o motor de jogo para gerar informações sobre onde as coisas estão e depois usar isso como entrada para uma rede neural que faria toda a renderização, então ela era responsável basicamente por todas as partes do processo de renderização. . Fazer com que aquilo funcionasse em tempo real em 2018 foi uma coisa meio visionária.

Catanzaro disse que a qualidade da imagem do jogo renderizado não chegava nem perto de Cyberpunk 2077, mas ele acha que “a longo prazo é para onde a indústria gráfica irá se dirigir”.

Usaremos cada vez mais IA generativa para o processo gráfico. Novamente, a razão para isso será a mesma de qualquer outra aplicação de IA: somos capazes de aprender funções muito mais complicadas observando enormes conjuntos de dados do que construindo manualmente algoritmos de baixo para cima.

Embora a visão da NVIDIA para futuras versões do DLSS seja atraente, estamos longe de que isso se torne realidade. Por enquanto, resta o DLSS 3.5 , que foi apresentado na semana passada . Ele traz o que a empresa chama de Ray Construction, um método baseado em IA de supercomputador para melhorar imagens de traçado de raio em jogos, em contraste com o método atual de usar denoisers ajustados manualmente.

(Através da Wccftech )