Содержание
Nvidia на конференции GTC снова показала Neural Texture Compression — технологию, которая сжимает текстуры и резко снижает расход видеопамяти. В демо-сцене Tuscan Villa потребление VRAM упало с 6,5 ГБ до 970 МБ, а картинка, по заявлению компании, осталась визуально идентичной.
Если цифры подтвердятся в реальных играх, это один из тех редких случаев, когда «AI в графике» решает старую и понятную проблему — раздувшийся аппетит текстур.
Neural Texture Compression: как Nvidia сжимает текстуры нейросетью
Neural Texture Compression (NTC) работает не как привычные блочные методы компрессии. Вместо них разработчики используют небольшие нейросети, которые «распаковывают» текстуры прямо в сцене. Nvidia говорит, что это снижает размер текстур и в установке игры, и в VRAM во время рендеринга.
В показанном примере Tuscan Villa сцена занимала 6,5 ГБ VRAM при стандартной блочной компрессии. С NTC — 970 МБ. Nvidia утверждает, что визуальная разница отсутствует.
Компания также заявляет, что итоговые текстуры могут выглядеть лучше. В отдельных случаях — до 4x выше «финального разрешения» в рендере по сравнению с классической компрессией.
Ещё один пример из более ранних демонстраций Nvidia — текстуры шлема пилота. В исходном виде они занимали 272 МБ. Блочная компрессия снижала объём до 98 МБ, а NTC — до 11,37 МБ, то есть примерно в 24 раза меньше оригинала.
Почему это не должно «съесть» FPS: ставка на Tensor Cores и аналоги
Nvidia объясняет эффективность NTC тем, что распаковка идёт через матричные ускорители. Это отдельный блок в современных GPU, который обычно не конкурирует напрямую с классическими шейдерами. У Nvidia это Tensor Cores, у Intel — XMX, у AMD — AI-ускорители. На этих же блоках работают апскейлеры вроде DLSS, XeSS и FSR.
Отдельный акцент Nvidia делает на том, что NTC не про генерацию контента. Нейросеть обучают на конкретном наборе текстур игры, и она нужна только для восстановления данных при рендеринге. Компания прямо говорит, что «галлюцинаций» тут быть не должно.
Neural Materials: ещё один шаг в «нейронный рендеринг»
На том же выступлении Nvidia показала Neural Materials. Идея похожая: нейросеть оценивает и «декомпрессирует» материал, чтобы не гонять тяжёлую математику BRDF для каждого слоя текстурных карт.
В демо Nvidia заявила прирост до 7,7 раза по скорости рендеринга в 1080p без потери качества.
Пока это всё остаётся демонстрациями: ни одна игра сейчас не заявлена с поддержкой Cooperative Vectors или NTC. При этом Nvidia подчёркивает, что подход не эксклюзивный. Microsoft стандартизировала эту идею в DirectX под названием Cooperative Vectors, Intel уже показывала собственное демо, а AMD публично говорила о технологии в 2024 году.
По материалам Nvidia и по тестам Tom’s Hardware.
