كشفت NVIDIA عن طريقة عمل DLSS 5 في تحسين الصورة، حيث يعتمد فقط على إطار ثنائي الأبعاد ومقدار الحركة لتوليد التفاصيل.

كيف يعمل DLSS 5: شرح من موظف Nvidia

في مقابلة حديثة، أوضح جاكوب فريدمان (Jacob Freeman) من Nvidia مبدأ عمل تقنية التوسيع الجديدة للصور — DLSS 5، التي تستخدم الذكاء الاصطناعي.

ما يُقدَّم إلى النظام
* إطار ثنائي الأبعاد – صورة مرسومة عادية.

* متجهات الحركة – معلومات عن كيفية تحريك الكائنات بين الإطارات.

لا تُستخدم بيانات ثلاثية الأبعاد: النموذج لا يقرأ هندسة المشهد، العمق، المواد أو خرائط الاعتمادات. هذا يعني أن DLSS 5 يعتمد بالكامل على المعلومات ثنائية الأبعاد والحركة.

كيف "يفهم" المشهد
* الدلالة – يتعرف الذكاء الاصطناعي على كائنات مثل الشعر، القماش، الجلد وظروف الإضاءة.

* لهذا يكفي إطار واحد فقط؛ النموذج لا يأخذ في الاعتبار المعدن، الخشونة أو خصائص المواد الأخرى.

لذلك قد تبدو النتائج أحياناً "غير متوقعة":
- يظهر للشخصية شعر حيث لا يوجد
- تتغيّر ملامح الوجه

لا يحدث أي تغيير في الهندسة الأساسية – إنها مجرد تفسير بصري للذكاء الاصطناعي.

القيود والقدرات للمطورين
* يمكن للمطورين ضبط شدة التأثير، تصحيح الألوان، التباين، التشبع، الطيف اللوني.

* يمكن استخدام أقنعة لاستبعاد كائنات معينة من المعالجة.

* ومع ذلك لا يمكنهم تعديل مباشرة ملامح الوجه أو إزالة تأثير "المكياج" – الطريقة الوحيدة هي تقليل شدة التأثير، وضع قناع أو تعطيل الخوارزمية بالكامل.

في النهاية يُولد الذكاء الاصطناعي الوجه، لكن مظهره الخارجي يمكن تعديله فقط بشكل غير مباشر.