Uma nova técnica de compressão neural desenvolvida pela NVIDIA promete aumentar em 16 vezes o nível de detalhe das texturas de materiais usados em gráficos 3D. A técnica, chamada de "Neural Texture Compression (NTC)", usa uma pequena rede neural para comprimir e descomprimir múltiplas texturas e suas cadeias de mipmaps juntas, otimizando o uso de memória.

Segundo a NVIDIA, o NTC supera técnicas avançadas de compressão de imagem, como AVIF e JPEG XL, e permite um acesso aleatório em tempo real semelhante à compressão de textura por blocos nas GPUs, possibilitando a compressão tanto no disco quanto na memória aprimorando significativamente a qualidade da imagem exibida.

A técnica foi apresentada na conferência SIGGRAPH 2021 e o código-fonte em CUDA está disponível para desenvolvedores e pesquisadores. O NTC é um exemplo de como a inteligência artificial pode acelerar e melhorar o pipeline gráfico, criando novas oportunidades para artistas e criadores.

Em um vídeo divulgado em seu canal no YouTube, a desenvolvedora revela as diferenças gráficas ao utilizar o método de compressão neural e a renderização de texturas com a técnica BCx. O comparativo confirma a enorme diferença na quantidade de detalhes em cada técnica utilizada pelos pesquisadores.

Confira no vídeo abaixo:

Usando essa abordagem, permitimos a compactação de baixa taxa de bits, desbloqueando dois níveis adicionais de detalhes (ou 16× mais texels) com requisitos de armazenamento semelhantes aos das técnicas de compressão de textura comumente usadas. Em termos práticos, isso permite que o espectador se aproxime muito de um objeto antes de perder detalhes significativos da textura", destaca a NVIDIA.

A empresa também publicou um conteúdo mostrando como a física neural consegue simular detalhes realistas como a movimentação individual de cada fio de cabelo, por exemplo, através de dados de inteligência artificial (IA).

Já conhecia essa tecnologia da NVIDIA? Conta pra gente, comente!