Знакомимся с NTC от Nvidia: нейросети на страже комфортного гейминга

Компания Nvidia разрабатывает технологию Neural Texture Compression (NTC), которая использует нейронные сети для сжатия текстурных данных, обеспечивая высокое качество изображения при значительном снижении требований к памяти. Как это работает и где технология может применяться — тема сегодняшнего разговора.

О чем речь

С развитием фотореалистичной графики в играх и других приложениях объемы текстурных данных значительно возросли, а это, в свою очередь, увеличило нагрузку на системы хранения, оперативную и видеопамять. Существующие методы сжатия, такие как Block Truncation Coding (BTC) и его преемники, не всегда справляются с современными требованиями к качеству и объему данных. Neural Texture Compression была разработана для решения этих проблем, предлагая более эффективное сжатие без потери качества.

Как работает

NTC сжимает несколько текстур материала и их mipmap-цепочки вместе, используя небольшую нейронную сеть, оптимизированную для каждого материала, для их декомпрессии. Это позволяет достичь высокого качества изображения при низкой скорости передачи данных и обеспечивает возможность произвольного доступа и декомпрессии в реальном времени на GPU.
Стоит отметить, что сейчас для эффективной работы технологии нужно действительно мощное современное устройство с тензорными ядрами, однако к моменту официального выхода требования к “железу” могут быть ниже.

В чем выгода

Для конечных пользователей NTC означает более детализированные и качественные текстуры в играх и приложениях при меньших требованиях к видеопамяти. Ресурс Compusemble уже смог протестировать бета-версию технологии в различных сценариях и получил впечатляющее уменьшение размера текстуры памяти с NTC на 96% по сравнению с обычными методами сжатия. В бенчмарке использовалась видеокарта RTX 4090 с разрешением 1440p и 4K. Авторы обещают повторить тест, когда в их распоряжении окажется RTX 5090.

Чего ждать

Уже в скором будущем NTC может стать стандартом в индустрии компьютерной графики, предлагая разработчикам эффективные инструменты для создания высококачественных визуальных эффектов при оптимальном использовании ресурсов. С дальнейшим развитием нейронных сетей и методов машинного обучения можно ожидать и еще большего улучшение эффективности и качества сжатия текстур.

Как видим, Neural Texture Compression от NVIDIA может стать хорошим примером использования нейросетей на благо конечного пользователя. Технология представляет собой значительный шаг вперед в области сжатия текстур, предлагая эффективное решение для современных требований к качеству графики и ресурсам системы. Если этот материал был вам интересен, подписывайтесь на PDALIFE Official в Telegram, у нас еще много интересного.