Sua RTX recebeu um upgrade: o DLSS 4 com Transformer!
A Nvidia lançou, junto com a série RTX 50, uma atualização para o DLSS, o DLSS 4 com Transformer, que afeta todas as GeForce RTX. A empresa introduziu um novo modelo neural para a operação do aumento de escala do DLSS (upscaling) e também para o gerador de novos quadros (frame gen), o Transformer, que promete entregar melhores resultados que a versão anterior utilizada.
Cyberpunk 2077 é o primeiro game com suporte para NVIDIA DLSS4
Por que a RTX 5090 ficou mais cara? GeForce RTX 50 EM DETALHES com Ziebert!
O que muda nessa troca? Primeiro precisamos entender o que são essas redes neurais, o “motor” que faz a criação de novos pixels e quadros do DLSS acontecer.
Para aplicar o Deep Learning Super Sampling (DLSS), as placas de vídeo da Nvidia trabalham com um conjunto de informações. Elas incluem informações vindas do motor do jogo, que dão informações dos vetores de movimento (pra onde as coisas estão indo) e também os próprios pixels de cada quadro gerado.
DLSS 4 com Transformer (site oficial)
Essas informações são jogadas em uma rede neural, que é uma série de algoritmos que buscam encontrar padrões em dados brutos. Uma rede neural é criada na base da força bruta: a Nvidia treina modelos em sucessivas tentativas, e depois compara com o resultado que deveria ter entregado, até chegar a um modelo que acerta mais.
DLSS 4 com Transformer
O que está mudando é justamente esse modelo. A Nvidia usava até o momento uma rede neural convolucional(Convolutional neural network ou CNNs). Essas redes tem um uso amplo em algoritmos de reconhecimento de objetos em foto, por exemplo.
Identificação por região da imagem, no modelo CNN. Fonte: Nvidia (divulgação)
Mas a Nvidia agora está migrando para o Transformer, e essa rede neural tem mais potencial de escalonar ainda mais a performance do DLSS. O Transformer tem amplo uso nas tecnologias generativas mais recentes, com o T, de ChatGTP, sendo justamente de Transformer (Generative Pre-trained Transformer, GTP).
Modelo Transformer e o uso da imagem como um todo. Fonte: Nvidia (divulgação)
E o que ele trás de potencial para o DLSS? Esse novo modelo de rede neural vai conseguir reter mais informação sobre cada pixel, além de conseguir analisar a imagem de forma mais ampla. Enquanto o modelo CNN avaliava a imagem por região, o Transformer verá a cena como um todo e irá identificar pixels mais relevantes. Esse modelo também é mais eficiente em usar informação de quadros anteriores da imagem.
O que isso impacta? Segundo a Nvidia, o Transformer vai ser melhor de evitar problemas como cintilação, que é quando as bordas de um objeto ficam “piscando” porque o DLSS não para de “mudar de ideia” sobre a cor que um pixel deve ter. Também vai reduzir problemas como ghosting, causado por um pixel que foi retido por tempo demais com uma mesma cor.
Mas nem tudo é positivo. De acordo com a Nvidia, o Transformer trabalha com o dobro de informações, então necessita do quádruplo de performance para ser executado. Felizmente, em nossos testes, mesmo uma placa popular como a GeForce RTX 4060 não parece ter sido muito impactada pelo uso do modelo transformer. A RTX 4090, por sua vez, apresentou variações abaixo de nossa margem de erro.
Variação de performance RTX 4060 com modelos Transformer e CNN. Fonte: Adrenaline
Variação de performance RTX 4090 com modelos Transformer e CNN. Fonte: Adrenaline
Em nossos testes, não notamos um impacto tão grande no uso do novo modelo em 4K. Mesmo usando o modo performance, ou seja, reduzindo a resolução em 4x, o modelo CNN se sai bem em ampliar uma imagem partindo da resolução Full HD.
Mas trazendo o teste para Full HD, as coisas ficaram mais interessantes. Aqui, ligar o DLSS em modo performance é precisar partir de uma imagem com apenas 560p de resolução, uma base com pouca informação para o modelo de IA trabalhar.
Aqui sem temos diferenças mais perceptíveis, especialmente na retenção de informações e na suavização dos artefatos gráficos, como as cintilações nas bordas. Isso faz o DLSS em modo performance entregar um resultado gráfico mais comparável ao 1080p nativo.
Quem tiver performance suficiente, ainda deve manter o DLSS em modo qualidade ou até no modo DLAA, em Full HD. Mas se está faltando performance no seu sistema, o modo performance do DLSS 4 com Transformer está entregando resultados bem melhores em 1080p, com menos defeitos na imagem, mesmo partindo de uma resolução tão baixa de renderização.
Compatibilidade das tecnologias DLSS 4. Fonte: Nvidia (divulgação)
O modelo Transformer do DLSS estará disponível em todas as placas compatíveis com o DLSS, o que inclui série GeForce RTX 20 para frente. Games poderão trazer suporte nativo, como já é o caso do Cyberpunk 2077, porém os jogadores também poderão usar o Nvidia APP para “forçar” a substituição do modelo CNN por Transformer em games que já possui suporte ao DLSS. Bem melhor que ficar copiando arquivos DLL de um game para outro ou usar software de terceiros.