Sony integruje technologie AI Cinemersive Labs do konwersji 3D w grach
Sony Interactive Entertainment przejęło brytyjski startup Cinemersive Labs, specjalizujący się w narzędziach AI do przekształcania zdjęć 2D i wideo w 3D. Zespół startupu dołączy do Visual Computing Group SIE, skupionej na renderingu gier, kodowaniu wideo i generatywnych modelach AI. To wzmocni możliwości Sony w dziedzinie obliczeń wizualnych dla PlayStation.
Technologie Cinemersive do treści 3D
Najnowsza developmentka Cinemersive to aplikacja Parallax dla VR, służąca do oglądania zdjęć paralaksowych. Takie obrazy powstają na smartfonach lub profesjonalnych aparatach ze stereoskopowymi obiektywami i pozwalają zmieniać kąt widzenia naturalnymi ruchami głowy.
Algorytmy AI Cinemersive przekształcają standardową treść 2D w formaty 3D. Proces obejmuje analizę głębi, generowanie par stereoskopowych i obliczanie paralaksy bez specjalistycznego sprzętu. Takie narzędzia nadają się nie tylko do zdjęć, ale też do wideo, co otwiera perspektywy w treściach growych.
W kontekście gier oznacza to możliwość szybkiego tworzenia immersyjnych środowisk z istniejących assetów, skracając czas na modelowanie 3D.
Integracja z ekosystemem PlayStation
Visual Computing Group SIE wykorzysta ekspertyzę Cinemersive do rozwoju ML w grafice. Główne kierunki:
- Ulepszanie renderingu w czasie rzeczywistym za pomocą modeli generatywnych.
- Optymalizacja tekstur i oświetlenia poprzez analizę AI.
- Tworzenie dynamicznych scen 3D z źródeł 2D do proceduralnej generacji.
Sony już stosuje uczenie maszynowe w PlayStation 5 Pro. Technologia PlayStation Spectral Super Resolution (PSSR) skaluje obrazy z niskiej rozdzielczości do 4K, wykorzystując sieci neuronowe do interpolacji pikseli i odtwarzania detali.
PSSR działa na niestandardowym GPU z akceleracją ML, zapewniając stabilny FPS przy wysokiej jakości. Dla deweloperów ułatwia to portowanie gier na różne rozdzielczości bez utraty wydajności.
Perspektywy zastosowania w gamedevie
Integracja konwersji AI 2D-to-3D pozwoli:
- Automatyzować tworzenie treści VR z płaskich tekstur.
- Generować efekty stereoskopowe dla mono-wideo w czasie rzeczywistym.
- Przyspieszyć prototypowanie środowisk w silnikach jak Unreal Engine czy proprietary tools Sony.
- Wspierać modding przez społeczność dzięki dostępnym assetom 2D.
W PlayStation 5 Pro PSSR pokazuje skuteczność: gry renderowane w 1080p-1440p, upscale do 4K z minimalnymi artefaktami. Podobne podejścia Cinemersive rozszerzą to na pełną treść 3D.
Techniczne wyzwania obejmują precyzję estymacji głębi w dynamicznych scenach i redukcję latencji dla VR. Sony może połączyć to z ray tracingiem dla fotorealistycznego paralaksu.
Co ważne
- Cinemersive Labs wzmacnia Visual Computing Group SIE w AI do konwersji 2D-to-3D.
- Parallax — aplikacja VR do zdjęć paralaksowych z head-tracking.
- PSSR w PS5 Pro: upscale AI do 4K dla optymalizacji wydajności.
- Zastosowanie w gamedevie: proceduralne 3D, treści VR, rendering ML.
- Nacisk na czas rzeczywisty bez specjalistycznego sprzętu.
— Editorial Team
Brak komentarzy.