# Sony integriert KI-Technologien von Cinemersive Labs für 3D-Konvertierung in Spielen
Sony Interactive Entertainment hat das britische Startup Cinemersive Labs übernommen, das sich auf KI-Tools für die Umwandlung von 2D-Fotos und -Videos in 3D spezialisiert hat. Das Team des Startups wird der Visual Computing Group von SIE beitreten, die sich auf Spielrendering, Video-Encoding und generative KI-Modelle konzentriert. Dies wird die Visual-Computing-Fähigkeiten von Sony für PlayStation stärken.
Cinemersive-Technologien für 3D-Inhalte
Cinemersives neueste Entwicklung ist die Parallax-App für VR, die zum Ansehen von Parallax-Fotografien gedacht ist. Diese Bilder werden mit Smartphones oder Profi-Kameras mit Stereo-Objektiven aufgenommen und ermöglichen es, den Blickwinkel durch natürliche Kopfbewegungen zu ändern.
Die KI-Algorithmen von Cinemersive wandeln Standard-2D-Inhalte in 3D-Formate um. Der Prozess umfasst Tiefenanalyse, Erzeugung von Stereopaaren und Parallax-Berechnung – keine spezielle Hardware erforderlich. Diese Tools funktionieren nicht nur bei Fotos, sondern auch bei Videos und eröffnen spannende Möglichkeiten für Gaming-Inhalte.
In Spielen bedeutet das, immersive Umgebungen aus bestehenden Assets schnell zu erstellen und die Zeit für 3D-Modellierung zu verkürzen.
Integration in das PlayStation-Ökosystem
Die Visual Computing Group von SIE wird die Expertise von Cinemersive nutzen, um ML in der Grafik voranzutreiben. Wichtige Schwerpunkte:
- Verbesserung des Echtzeit-Renderings mit generativen Modellen.
- Optimierung von Texturen und Beleuchtung durch KI-Analyse.
- Erzeugung dynamischer 3D-Szenen aus 2D-Quellen für prozedurale Generierung.
Sony setzt bereits Machine Learning in der PlayStation 5 Pro ein. PlayStation Spectral Super Resolution (PSSR) skaliert Bilder niedriger Auflösung auf 4K hoch, indem es neuronale Netze für Pixel-Interpolation und Detailrekonstruktion nutzt.
PSSR läuft auf einer speziellen GPU mit ML-Beschleunigung und liefert stabile FPS in höchster Qualität. Für Entwickler vereinfacht es das Porting von Spielen über verschiedene Auflösungen hinweg, ohne Leistungseinbußen.
Perspektiven für die Spieleentwicklung
KI-gestützte 2D-zu-3D-Konvertierung wird Folgendes ermöglichen:
- Automatisierung von VR-Inhalten aus flachen Texturen.
- Echtzeit-stereoskopische Effekte für Mono-Video.
- Schnelleres Prototyping von Umgebungen in Engines wie Unreal Engine oder Sonys proprietären Tools.
- Unterstützung für Community-Modding über zugängliche 2D-Assets.
Auf der PlayStation 5 Pro beweist PSSR seinen Wert: Spiele rendern bei 1080p–1440p und skalieren auf 4K hoch mit minimalen Artefakten. Die Ansätze von Cinemersive werden dies auf vollständige 3D-Inhalte ausdehnen.
Technische Hürden umfassen präzise Tiefenschätzung in dynamischen Szenen und Minimierung der VR-Latenz. Sony könnte dies mit Ray Tracing kombinieren, um fotorealistische Parallax-Effekte zu erzeugen.
Wichtige Erkenntnisse
- Cinemersive Labs stärkt die Visual Computing Group von SIE mit KI für 2D-zu-3D-Konvertierung.
- Parallax: VR-App für Parallax-Fotos mit Head-Tracking.
- PSSR in PS5 Pro: KI-Upscaling auf 4K für Leistungsgewinne.
- Anwendungen in der Spieleentwicklung: prozedurales 3D, VR-Inhalte, ML-Rendering.
- Fokus auf Echtzeit-Verarbeitung ohne spezielle Ausrüstung.
— Editorial Team
Noch keine Kommentare.