NVIDIA stellt sich DLSS 10 als ein vollständig neuronales Rendering-System vor, das mit Spiele-Engines verbunden ist

NVIDIA kündigte bereits 2018 DLSS (kurz für Deep Learning Super Sampling) als neue Video-Rendering-Technik an. Mit jeder Iteration hat sich DLSS weiterentwickelt und NVIDIA geht davon aus, dass DLSS 10 in Zukunft jeden Aspekt des Renderings mithilfe von KI bewältigen kann.

In einem kürzlich von Digital Foundry veranstalteten Roundtable zu AI Visuals wurde Bryan Catanzaro, VP of Applied Deep Learning Research bei NVIDIA, nach seinen Gedanken zur Zukunft von DLSS und den Problembereichen gefragt, die maschinelles Lernen angehen könnte. Als Antwort erklärte er:

Ich glaube nicht, dass KI Spiele so entwickeln wird, dass man einfach einen Absatz über die Entwicklung eines Cyberpunk-Spiels schreibt und dann etwas so Gutes wie Cyberpunk 2077 herausbringt. Ich glaube schon, dass, sagen wir mal, DLSS 10 in ferner Zukunft auf den Markt kommt Es soll ein vollständig neuronales Rendering-System sein, das auf unterschiedliche Weise mit einer Spiel-Engine interagiert und dadurch immersiver und schöner wird.

Er erwähnte eine frühere Demo einer Welt, die von einem neuronalen Netzwerk gerendert und von einer Spiel-Engine angetrieben wurde.

Im Jahr 2018 haben wir auf der NeurIPS-Konferenz tatsächlich eine wirklich coole Demo einer Welt zusammengestellt, die zwar vollständig von einem neuronalen Netzwerk gerendert, aber von einer Spiel-Engine gesteuert wurde.

Im Grunde genommen haben wir die Spiel-Engine genutzt, um Informationen darüber zu generieren, wo sich Dinge befinden, und diese dann als Eingabe für ein neuronales Netzwerk verwendet, das das gesamte Rendering übernehmen würde, sodass es im Grunde für jeden Teil des Rendering-Prozesses verantwortlich war . Allein schon, dieses Ding im Jahr 2018 in Echtzeit zum Laufen zu bringen, war eine Art visionäre Sache.

Catanzaro sagte, die Bildqualität des gerenderten Spiels entspreche nicht annähernd der von Cyberpunk 2077, glaubt aber, dass „die Grafikindustrie auf lange Sicht in diese Richtung gehen wird.“

Wir werden für den Grafikprozess immer mehr generative KI einsetzen. Auch hier wird der Grund dafür derselbe sein wie bei jeder anderen KI-Anwendung: Wir können viel kompliziertere Funktionen lernen, indem wir riesige Datensätze betrachten, als wenn wir Algorithmen manuell von unten nach oben erstellen.

Während die Vision von NVIDIA für zukünftige DLSS-Versionen verlockend ist, sind wir noch weit davon entfernt, sie Wirklichkeit werden zu lassen. Vorerst bleibt Ihnen DLSS 3.5 , das letzte Woche eingeführt wurde . Es bietet das, was das Unternehmen „Ray Construction“ nennt, eine auf Supercomputern basierende Methode zur Verbesserung von Raytracing-Bildern in Spielen, im Gegensatz zur aktuellen Methode, manuell abgestimmte Denoiser zu verwenden.

(Über Wccftech )