欢迎加 Discord,并在#ue5-3dgs 频道 和PICO交流和提供反馈。
SecureMR
对于希望构建 AI/ML 场景理解功能的 MR 开发者来说,访问摄像头数据一直是个挑战。为解决这一问题,PICO推出了 SecureMR——一套保障隐私的端侧 AI 推理方案,专为混合现实场景打造。
以下为一个功能示例:
SecureMR 在 PICO 4 Ultra 上实时执行人脸检测,并在检测到的人脸上方渲染 3D UFO 模型。整个过程在设备本地完成,无需回传摄像头图像给应用。
除了人脸识别,SecureMR 还支持常见物体识别、姿态估计等多种模型,皆以隐私优先的方式执行。
SecureMR 工作流程如下:
应用将 ML 模型发送至 SecureMR。
SecureMR 处理原始数据(如视频流、深度图)。
推理引擎执行模型。
推理结果以安全方式用于渲染或后续逻辑处理。
PICO已发布原生 C++ SDK,Unity 版本也即将上线。你可以访问SecureMR 开发者文档 、开发者文章 和 GitHub 仓库 获取更多技术细节。如有问题、讨论或反馈,欢迎加入Discord,前往 #spatial-ml 频道交流。
WebSpatial
最后,PICO介绍了 WebSpatial——一款开源、跨平台的 Web 空间化开发框架,用于将传统网站空间化至 XR 设备中。
WebSpatial 降低了传统 Web 开发者进入 XR 世界的门槛。全球超过 60% 的开发者使用 Web 技术,而 XR 传统上偏向 3D 引擎开发者。WebSpatial 的目标是扩大 XR 生态的开发者基础。
以下是一个电商示例,展示了 2D 窗口内嵌 3D 模型、玻璃材质特效与空间分层等功能。