На тлі численної критики стосовно нової версії апскейлера NVIDIA DLSS 5, відомий ютубер Деніел Оуен звернувся до компанії з низкою уточнень щодо роботи цієї інноваційної технології. Його запити стосувалися ключових аспектів функціонування DLSS 5, що викликали неоднозначну реакцію серед користувачів та експертів.
Розкриття механізму роботи DLSS 5
Центральним питанням, яке хвилювало Оуена, було справді чи використовує DLSS 5 виключно знімок екрану (скриншот) разом із векторами руху для генерації кінцевого зображення. Представник NVIDIA, Джейкоб Фрімен, підтвердив цю інформацію.
Згідно з його поясненнями, DLSS 5 пропускає вихідний скріншот через потужну генеративну нейромережу (тип штучного інтелекту), яка оптимізує візуальне представлення. Остаточний результат потім інтегрується в ігровий рушій. Це означає, що технологія активно використовує алгоритми штучного інтелекту для поліпшення якості зображення, але спирається на вже відрендерений кадр.
Аналіз 3D-геометрії та глибини
Продовжуючи розмову, Оуен поцікавився, чи DLSS 5 проводить аналіз 3D-геометрії та глибини сцени, чи обмежується лише обробкою скриншоту для покращення на основі отриманих даних. Представник NVIDIA наголосив, що нейромережа DLSS 5 тренується комплексно, аби розуміти семантику зображення. Це включає розпізнавання таких елементів, як персонажі, текстури одягу, волосся, напівпрозора шкіра, а також оцінку умов освітлення – чи то фронтальне, заднє, чи похмура погода. Важливо, що цей аналіз відбувається на основі одного кадру.
Попри це пояснення, ютубер дійшов висновку, що DLSS 5, схоже, не взаємодіє безпосередньо з 3D-геометрією гри. Однак виникає логічне запитання: якщо базова геометрія та текстури залишаються незмінними, як стверджує NVIDIA, чому в деяких випадках текстури виглядають інакше, ніж в оригіналі? Навіть якщо зміни незначні, вони помітні. Як приклад, Оуен навів випадок із персонажем гри Starfield, у якого після обробки DLSS 5 з’явилося значно більше волосся на скроні.
На це питання представник NVIDIA ухилився від прямої відповіді. Він зазначив, що базова геометрія справді не змінюється, а версія, продемонстрована компанією, є ранньою. На думку ютубера, хоча геометрія може залишатися незмінною, кінцевий результат залежатиме від того, як саме DLSS 5 інтерпретує та модифікує зображення, прагнучи його покращити.
Думка UA Новини: Нові деталі про роботу DLSS 5 свідчать про значний крок у розвитку генеративних нейромереж для покращення графіки, але піднімають питання про творчу свободу ШІ у фінальному рендерингу. Це може як відкрити нові можливості для візуальної якості, так і призвести до небажаних артефактів, що потребуватиме ретельного контролю з боку розробників.
Дізнатися більше на: itc.ua