DLSS 5 для всего: моддер запускает нейронный рендеринг NVIDIA в браузере

Модер MAAN продемонстрировал работу нейронного рендеринга NVIDIA DLSS 5 непосредственно в браузере.

Это интересно, поскольку официальная реализация NVIDIA не предусматривает способа запуска DLSS 5 в браузерах. Текущая реализация для разработчиков ориентирована на нативные приложения, использующие DirectX или Vulkan.

В настоящее время экспериментальный проект все еще находится в стадии разработки, однако разработчик обещает в ближайшее время разместить исходный код на GitHub. Он демонстрирует применение DLSS к контенту в браузере. NVIDIA в настоящее время предлагает доступ к DLSS 5 NR через интерфейс NGX или SDK Streamline.

Streamline работает как слой совместимости между приложением и графическими API, в частности DirectX или Vulkan, помогая разработчикам получать необходимые ресурсы, такие как векторы движения, данные о глубине и отрендеренные изображения. Текущая документация не содержит указаний относительно поддержки интерфейсов NVIDIA WebGL или WebGPU.

Остается вопрос, каким образом моддер подключает браузерный рендерер к DLSS. Он пока не раскрыл технических деталей. Поэтому непонятно, использует ли проект стандартные бинарные файлы DLSS через собственный путь, или же работает с изображениями, отрендеренными в браузере, или использует какую-то другую реализацию.

Проект пока находится на ранней стадии разработки, однако уже работает даже с Apple Silicon, однако не так быстро. Эта технология может быть интересна архитекторам для предварительного просмотра 3D-моделей и других задач, где производительность в режиме реального времени не столь важна. В играх загрузка DLSS-NR работает значительно быстрее.

Источник: VideoCardz