英伟达（NVIDIA）近日宣布，NVIDIA XR AI 现已开启公开测试版。该平台为开发者提供了一个工具库，可用于为增强现实（AR）眼镜和扩展现实（XR）设备构建具备空间感知能力的多模态 AI 智能体。

通过将 XR 设备的输入与 AI 模型、企业数据、工具以及加速计算相连接，NVIDIA XR AI 使智能体能够在实际工作流程中实现 " 感知、推理和执行 "。

英伟达补充道，该平台有助于简化多模态感知、企业数据检索、推理模型和智能体编排的集成工作，并为开发者构建或接入企业级 XR 应用所需的技能与工具奠定了基础。

VITURE 已将 NVIDIA XR AI 集成到其可穿戴界面中，图源：Trend Hunter

英伟达指出，该平台整合了四大核心能力：

真实世界数据接入：

处理来自 AR 和 XR 设备的视频、音频、深度、姿态及传感器数据。

专用工具与服务：

包括用于视觉 AI 和视频理解的 NVIDIA Metropolis 与 VSS，以及用于企业知识检索和检索增强生成（RAG）的 NVIDIA NeMo Retriever。

AI 模型支持：

支持 NVIDIA Nemotron 推理模型、NVIDIA Cosmos Reason 及其他兼容的基础模型。

智能体编排与运行时服务：

提供旨在帮助开发者将应用从原型推向生产环境的工具。

此外，该平台还支持工具调用、推理工作流，并支持跨云端、数据中心和边缘环境的部署。英伟达表示，这些能力的结合，使智能体能够理解周围环境、访问企业知识库、对任务进行推理，并实时提供具有上下文信息的辅助。

图源：MIXED reality news

英伟达重点介绍了几家正在使用、推出或探索基于 NVIDIA XR AI 构建应用的公司及研究机构：

工厂维护与故障排查

西门子（Siemens）正在探索如何利用 NVIDIA XR AI 和 NVIDIA DGX Spark，帮助工厂工程师查找维护信息、排查故障、验证工作并记录车间发生的情况。该系统允许佩戴轻量级眼镜的工程师向 AI 智能体询问问题，并获得实时指导，将工业系统、数字孪生和自动化工作流无缝连接。

科学研究的免提操作指导

AutoBio 旗下的 Rana 公司正在 NVIDIA XR AI 上推出其 LabOS 系统，将空间智能直接引入科学工作流。LabOS 可为复杂的实验流程（从干细胞疗法到基因编辑研究）提供实时的免提操作指导。

该平台兼容 Meta、Rokid 和 VITURE 的智能眼镜，可帮助研究人员识别正确的样本和 CRISPR 基因编辑器，引导实验步骤，并生成结构化、可复现的记录。此外，VITURE 还将 NVIDIA XR AI 集成到其可穿戴界面中，使工作人员能够免提获取上下文信息和任务指导。

图源：VITURE

手术室中的情境感知辅助

匹兹堡大学医学中心（UPMC）的 Surreality 实验室展示了一条运行在 NVIDIA XR AI 和 NVIDIA DGX Station 上的处理管线。该管线旨在帮助手术团队查找信息并引导注意力，同时避免给外科医生增加视觉干扰。据英伟达介绍，该系统能够识别外科医生视野中不应被遮挡的区域，从而在提供有用上下文信息的同时，确保医生将注意力集中在患者和手术操作上。

设计评审与沉浸式内容应用

在汽车设计领域，Innoactive 正使用 NVIDIA DGX Spark 系统，展示企业如何在沉浸式工作流（包括设计评审、产品展厅和数字孪生）中捕获信息。最后，Atlantic Studios 正利用 NVIDIA XR AI 对泰坦尼克号进行沉浸式扫描，用户可以通过语音提示探索这艘沉船，定位兴趣点并获取关于该遗址的上下文信息。

文 / 守望者