索尼收购 Cinemersive，用于 PlayStation 的 AI-3D

# 索尼整合 Cinemersive Labs 的 AI 技术，用于游戏中的 3D 转换

索尼互动娱乐 (SIE) 已收购英国初创公司 Cinemersive Labs，该公司专注于将 2D 照片和视频转换为 3D 的 AI 工具。该初创公司的团队将加入 SIE 的视觉计算组，该组专注于游戏渲染、视频编码以及生成式 AI 模型。这将提升索尼为 PlayStation 提供的视觉计算能力。

Cinemersive 的 3D 内容技术

Cinemersive 最新的产品是为 VR 设计的 Parallax 应用，专用于查看视差照片。这些图像使用立体镜头在智能手机或专业相机上拍摄，可以通过自然的头部移动改变视角。

Cinemersive 的 AI 算法将标准 2D 内容转换为 3D 格式。该过程包括深度分析、立体对生成以及视差计算——无需专用硬件。这些工具不仅适用于照片，还适用于视频，为游戏内容开辟了激动人心的可能性。

在游戏中，这意味着可以从现有素材快速创建沉浸式环境，大幅缩短 3D 建模时间。

整合进 PlayStation 生态系统

SIE 的视觉计算组将利用 Cinemersive 的专长，推动图形领域的 ML 发展。主要重点领域包括：

• 使用生成模型增强实时渲染。
• 通过 AI 分析优化纹理和照明。
• 从 2D 来源生成动态 3D 场景，用于程序化生成。

索尼已在 PlayStation 5 Pro 中应用机器学习。PlayStation Spectral Super Resolution (PSSR) 使用神经网络将低分辨率图像升级至 4K，实现像素插值和细节重建。

PSSR 在配备 ML 加速的定制 GPU 上运行，提供顶级画质下的稳定 FPS。对于开发者而言，它简化了跨分辨率移植游戏的过程，而不会牺牲性能。

游戏开发的展望

基于 AI 的 2D 到 3D 转换将实现：

• 从平面纹理自动化生成 VR 内容。
• 为单目视频提供实时立体效果。
• 在 Unreal Engine 或索尼专有工具等引擎中更快地原型化环境。
• 通过易获取的 2D 素材支持社区模组制作。

在 PlayStation 5 Pro 上，PSSR 证明了其价值：游戏以 1080p-1440p 渲染并升级至 4K，伪影极少。Cinemersive 的方法将此扩展至完整的 3D 内容。

技术挑战包括动态场景中的精确深度估计以及最小化 VR 延迟。索尼可以将此与光线追踪结合，实现照片级真实的视差效果。

关键要点

• Cinemersive Labs 为 SIE 的视觉计算组带来 2D 到 3D 转换的 AI 技术。
• Parallax：带有头部追踪的视差照片 VR 应用。
• PS5 Pro 中的 PSSR：AI 升级至 4K 以提升性能。
• 游戏开发应用：程序化 3D、VR 内容、ML 渲染。
• 强调无需专用设备即可实时处理。

— Editorial Team