Reti neurali: Nvidia vuole migliorare notevolmente la compressione delle texture

Il team di ricerca del produttore di GPU Nvidia ne ha uno Nuova compressione delle texture basata su reti neurali piede. Questo non dovrebbe solo risolvere il problema che i giochi diventano sempre più grandi a causa di texture dettagliate, ma anche che queste riempiono la VRAM più velocemente e talvolta possono portare a balbuzie.

Il team Nvidia confronta anche lo sviluppo di tecnologie di compressione delle immagini naturali con il miglioramento delle tecnologie GPU. È stato confermato che quest’ultimo ha fatto enormi progressi e che recentemente sono stati raggiunti bit rate molto bassi con una buona qualità con AVIF e JPEG XL. La compressione delle texture sulle GPU, chiamata BC, è accelerata dall’hardware e offre una serie di vantaggi come l’accesso casuale e la posizione dei dati. Tuttavia, la tecnologia stessa si basa su idee degli anni ’90 e offre solo una pressione moderata.

Nvidia sta ora combinando alcuni aspetti di questi due approcci e li sta implementando nelle reti neurali. Neural Texture Compression (NTC) utilizza essenzialmente un eccesso della trama di una singola superficie. Tuttavia, per questo non viene utilizzata alcuna rete neurale addestrata a livello globale, ma per ogni soggetto viene utilizzata una rete più piccola.

Ottima qualità e veloce

Il tasso di compressione ottenuto in questo modo dovrebbe avvicinarsi ai risultati di AVIF e JPEG XL, ma consentire comunque l’accesso casuale e, soprattutto, la decompressione in tempo reale, che è particolarmente importante per i giochi. Il team ottiene una rapida decompressione NTC utilizzando moduli tensori di moltiplicazione di matrici, ora disponibili nella maggior parte delle GPU.

La perdita di velocità è trascurabile rispetto alla decompressione BC implementata in unità hardware specializzate. Il team conclude che la tecnologia NTC dovrebbe essere già utilizzabile nella pratica, soprattutto in scenari con poco disco rigido e RAM.