NVIDIA DLSS 5 легла в основу UNCANNY: нейросетевой ремастеринг заставляет старые и современные игры выглядеть как новые

Несмотря на то, что многие выступают против нейросетевого рендеринга NVIDIA DLSS 5 из-за неоднородных результатов в некоторых играх — хотя отдельные разработчики, включая руководителя серии Kingdom Come: Deliverance Даниэля Вавру, последовательно хвалят технологию, — нельзя отрицать, что она способна внести серьёзные изменения в игровую индустрию. Тем более что, согласно имеющейся информации, AMD также работает над собственной технологией нейросетевого рендеринга.

Хотя технология всё ещё находится на ранней стадии развития, NVIDIA DLSS 5 уже находит весьма интересные применения. Вместе с другими технологиями она используется в новом движке нейросетевого ремастеринга в реальном времени под названием UNCANNY, который потенциально способен значительно улучшить не только классические игры, запускаемые через эмуляторы, но и современные проекты для ПК.

Создатель проекта imissanyway рассказал, что работает над UNCANNY как над системой нейросетевого ремастеринга в реальном времени. Основная идея заключается в создании единой среды выполнения, которую можно подключать к компьютерным играм и эмуляторам, чтобы выполнять весь процесс ремастеринга непосредственно во время работы игры вместо необходимости создавать отдельные модификации-ремастеры для каждого проекта.

Проект уже работает с эмулятором PlayStation 2 PCSX2, а также с современными компьютерными играми. UNCANNY использует собственный конвейер реконструкции с режимами в 1, 1,5, 2, 2,5 и 3 прохода, защиту от проблем, связанных с движением и шлейфами изображения, интеграцию нейросетевого рендеринга NVIDIA DLSS 5, а также экспериментальную систему REVENANT, над которой автор сейчас работает и которая предназначена для реконструкции игровых ресурсов.

Многопроходная система должна стать одним из основных отличий UNCANNY от похожих проектов. Вместо многократного последовательного применения одного и того же полного прохода DLSS основная часть обработки выполняется во время первого прохода, а последующие используют полученный результат как основу и дополнительно дорабатывают изображение.

UNCANNY всё ещё находится на очень ранней альфа-стадии и имеет множество проблем. Среди них — совместимость со старыми играми на DirectX и необходимость добиться стабильной работы нейросетевого рендеринга во всех сценариях. Тем не менее опубликованные сравнительные изображения уже демонстрируют весьма впечатляющий потенциал проекта.

Наибольшую пользу от сочетания UNCANNY и NVIDIA DLSS 5 получают игры с более реалистичной визуальной стилистикой, такие как Marvel's Spider-Man. Однако заметные улучшения видны и в других проектах даже при использовании одного движка ремастеринга. В 007: From Russia with Love особенно заметно повышение детализации лиц, тогда как в BLACK значительно улучшилось отображение световых лучей внутри помещений. Если подобных результатов удалось добиться уже на столь ранней версии проекта, дальнейшее развитие технологии может привести к ещё более существенным улучшениям.

Одновременно с анонсом UNCANNY создатель проекта выпустил первую публичную сборку для тестирования. Она уже доступна через страницу проекта на GitHub.