Nvidia ще научи старите GeForce видео карти да увеличават FPS с помощта на AI
В интервю за Digital Foundry, Браян Катандзаро (Bryan Catanzaro), вицепрезидент по изследванията за приложно дълбоко обучение в Nvidia, каза, че в бъдеще не изключва възможността за въвеждане на функция за генериране на кадри с изкуствен интелект за увеличаване на FPS, която стана част от DLSS технологията в по-старите видеокарти на Nvidia.
От дебюта си през 2018 г., технологията за мащабиране с дълбоко обучение на Nvidia (DLSS) еволюира в своята четвърта версия. Последната му итерация премина към ИИ-модел от типа трансформър, което направи възможно внедряването на редица нови функции, включително генериране на множество кадри (MFG). Последното позволява създаване на до три допълнителни кадъра за всеки традиционно изобразен кадър, за повишение на FPS.

Nvidia успя да внедри някои нови технологии, включително DLSS Ray Reconstruction, Super Resolution и технологията Deep Learning Anti-Aliasing (DLAA) на всички GeForce RTX графични карти от 20-та година насам. Обаче първото поколение Frame Generation, първоначално въведено като ексклузивна особеност в графичните карти от серията GeForce RTX 40, не се поддържа от моделите от серията GeForce RTX 30 и RTX 20. Новият многокадров генератор първоначално беше анонсиран само за най-новата GeForce RTX 5000.
В разговор с репортери, Брайън Катандзаро отбеляза, че не изключва появата на функция за генериране на кадри в по-старите модели видеокарти на Nvidia.
„Мисля, че ключът тук е въпрос на проектиране и оптимизацията, както и изживяване на крайния потребител. Ние използваме най-добрият генератор на кадри, който е базиран на Multi Frame Generation технология, във видеокартите от серия 50. И в бъдеще ще видим дали можем да изтръгнем нещо за старото поколение оборудване“ — коментира представителят на Nvidia.

Като се има предвид изявлението на Катандзаро, може да се предположи, че първата версия на генератора на кадри може в крайна сметка да се появи във видеокартите от серията GeForce RTX 30. Малко вероятно е обаче да я видим в моделите от серия GeForce RTX 20. В същото време най-вероятно генераторът на многокадрови кадри ще остане ексклузивен за видеокартите от серия RTX 50, тъй като работата му изисква значително повече изчислителна мощност, пригодена за AI, която тези карти осигуряват с новите тензорни ядра.
Един от водещите разработчици на Nvidia също сподели малко информация относно развитието на DLSS.
„Когато създадохме Nvidia DLSS 3 Frame Generation, ние абсолютно се нуждаехме от хардуерно ускорение за изчисления на Optical Flow. Но нямахме достатъчно тензорни ядра и добър алгоритъм за оптичен поток. Ние не създадохме алгоритъм за оптичен поток в реално време върху тензорни ядра, който да се вмести в нашите резерви за изчислителна мощност. Имахме хардуерния ускорител Optical Flow, който Nvidia изграждаше от години като еволюция на нашата технология за видео кодиране. Това също беше част от нашата технология за ускоряване на компютърното зрение за самоуправляващите се автомобили. Изглежда, че ще има смисъл да го използваме и за Nvidia DLSS 3 Frame Generation. Но предизвикателството при всяко хардуерно внедряване на алгоритъм като Optical Flow е, че наистина е трудно да се подобри. Това е, каквото е, и проблемите, които този хардуерен Optical Flow причини, бяха неща, които не можахме да коригираме с по-интелигентна невронна мрежа, докато не решихме просто да я заменим и да преминем към изцяло базирано на AI решение. Точно това направихме и за генерирането на кадри в DLSS 4.„