# Sony, 게임 3D 변환을 위한 Cinemersive Labs의 AI 기술 통합
Sony Interactive Entertainment은 2D 사진과 비디오를 3D로 변환하는 AI 도구를 전문으로 하는 영국 스타트업 Cinemersive Labs를 인수했습니다. 해당 스타트업 팀은 게임 렌더링, 비디오 인코딩, 생성 AI 모델에 초점을 맞춘 SIE의 Visual Computing Group에 합류할 예정입니다. 이를 통해 PlayStation을 위한 소니의 비주얼 컴퓨팅 능력이 강화될 것입니다.
3D 콘텐츠를 위한 Cinemersive 기술
Cinemersive의 최신 개발작은 VR용 Parallax 앱으로, 패럴랙스 사진 관람을 위해 설계되었습니다. 이러한 이미지는 스마트폰이나 스테레오 렌즈가 장착된 전문 카메라로 촬영되며, 자연스러운 머리 움직임으로 시야 각도를 변경할 수 있습니다.
Cinemersive의 AI 알고리즘은 표준 2D 콘텐츠를 3D 형식으로 변환합니다. 이 과정은 깊이 분석, 스테레오 쌍 생성, 패럴랙스 계산을 포함하며—전문 하드웨어가 필요 없습니다. 이러한 도구는 사진뿐만 아니라 비디오에도 적용되어 게임 콘텐츠에 흥미로운 가능성을 열어줍니다.
게임에서 이는 기존 자산으로부터 빠르게 몰입형 환경을 생성하고 3D 모델링 시간을 단축하는 것을 의미합니다.
PlayStation 생태계로의 통합
SIE의 Visual Computing Group은 Cinemersive의 전문성을 활용해 그래픽 분야에서 ML을 발전시킬 것입니다. 주요 초점 영역:
- 생성 모델을 활용한 실시간 렌더링 강화.
- AI 분석을 통한 텍스처와 조명 최적화.
- 프로시저럴 생성을 위한 2D 소스에서 동적 3D 장면 생성.
소니는 이미 PlayStation 5 Pro에서 머신러닝을 사용하고 있습니다. PlayStation Spectral Super Resolution(PSSR)은 신경망을 이용해 저해상도 이미지를 4K로 업스케일하며 픽셀 보간과 세부 재구성을 처리합니다.
PSSR은 ML 가속이 적용된 맞춤 GPU에서 실행되어 최고 품질에서 안정적인 FPS를 제공합니다. 개발자 입장에서는 성능 저하 없이 다양한 해상도로 게임을 포팅하기 쉽게 만들어줍니다.
게임 개발 전망
AI 기반 2D-to-3D 변환은 다음을 가능하게 할 것입니다:
- 플랫 텍스처에서 VR 콘텐츠 자동화.
- 모노 비디오에 대한 실시간 스테레오스코픽 효과.
- Unreal Engine이나 소니의 독점 도구 같은 엔진에서 환경 프로토타이핑 가속화.
- 접근 가능한 2D 자산을 통한 커뮤니티 모딩 지원.
PlayStation 5 Pro에서 PSSR은 그 가치를 입증했습니다: 게임이 1080p-1440p로 렌더링된 후 최소 아티팩트로 4K까지 업스케일됩니다. Cinemersive의 접근법은 이를 전체 3D 콘텐츠로 확장할 것입니다.
기술적 과제에는 동적 장면에서의 정확한 깊이 추정과 VR 지연 최소화가 포함됩니다. 소니는 이를 레이 트레이싱과 결합해 포토리얼리스틱 패럴랙스를 구현할 수 있습니다.
주요 요약
- Cinemersive Labs가 SIE의 Visual Computing Group에 2D-to-3D 변환 AI를 강화.
- Parallax: 헤드 트래킹 패럴랙스 사진용 VR 앱.
- PS5 Pro의 PSSR: 성능 향상을 위한 4K AI 업스케일링.
- 게임 개발 적용: 프로시저럴 3D, VR 콘텐츠, ML 렌더링.
- 전문 장비 없이 실시간 처리 강조.
— Editorial Team
아직 댓글이 없습니다.