AI 模型与平台
Voxel51 推出统一数据平台 3.0,面向物理 AI 团队

2026 年 10 月 15 日,Voxel51 推出了 Voxel51 3.0。这是一个面向物理 AI 的端到端多模态数据平台,将搜索、整理、标注和评估整合到一个可扩展系统中。联合创始人兼首席执行官 Brian Moore 在公司的公告中称,这是公司“迄今为止最重要的一次发布”。团队现在可以在 app.voxel51.com 免费使用自己的数据体验该平台。
此次发布还为公司的企业产品更换了名称:Voxel51 是 FiftyOne Enterprise 的新名称,而 FiftyOne 仍指开源项目。Moore 写道,公司多年来一直与在自动驾驶系统、机器人、制造业和医疗保健领域部署 AI 的团队合作,并在过去几个月里围绕模型从原型阶段走向实际应用后开始的数据工作重建了平台,这些工作包括调查故障、整理训练集,以及在真实场景中评估模型。
多模态搜索与时间序列支持
Voxel51 Search 是一个持久化混合搜索索引,可在多模态数据集中的非结构化内容和结构化元数据上,结合语义检索、词法查询与筛选条件。公告称,Search 会自动为数据集建立索引并计算嵌入,因此从第一天起即可进行查询;它还会让嵌入和结构化字段保持原生可查询状态,并在检索时将它们结合起来。该平台使用 LanceDB 进行向量检索,其列式架构支持向量搜索以及标量索引和全文索引,同时将存储与计算分离。
团队可以控制整个嵌入流程,包括要对哪些数据生成嵌入、使用哪种模型和计算资源,以及何时生成嵌入;增量更新无需重建整个数据集。此次发布还为时间序列多模态数据提供了一级支持:多个传感器数据流可以显示在同一时间轴上,而片段级嵌入能让团队检索长时间录制内容中的特定时刻,而不是用单个嵌入来表示整个片段。
Voxel51 Agent 与智能体标注
Voxel51 Agent 将搜索、整理、标注和评估串联成可重复的工作流,这些工作流由 45+ 个 MCP 工具、80+ 个算子和 18 个开源技能构成。公告介绍了几种应用示例:机器人团队可以在数千个片段中搜索特定行为,以整理有针对性的训练集和评估集;感知团队可以从模型故障出发,找到相似的长尾场景,开展新的标注并重新评估;标注准备流程则可以将不确定的案例转交人工审核人员。Agent 还可以编写代码以添加新功能,而且所有工作流都会沿用组织设定的权限、安全和治理控制。
在发布前,Voxel51 于 2026 年 10 月 8 日发布的一篇文章中表示,Agent 基于 Model Context Protocol 构建。这是一项用于将 AI 应用连接到外部工具的开放标准。Voxel51 还表示,Agent 可连接 100 多家模型提供商,包括 Anthropic、OpenAI 和 Google,并支持云端、混合、本地部署、气隙隔离和托管部署等选项。公司报告称,对 Claude Sonnet 5、Claude Opus 5、GPT-5.1 和 Gemini 3.1 Pro 执行相同的智能体任务进行基准测试后发现,成本差异最高可达 15 倍。
3.0 版本还统一了适用于 2D、3D、视频和多模态数据的标注工作流,并提供自动化质量保证、标注人员指标,以及用于管理人机协同审核的工具。其智能体标注功能利用视觉语言模型,根据自然语言指令和示例生成标签,并通过审核工作流验证结果。公司援引其《2026 年物理 AI 现状》调查称,表现突出的团队将超过一半的项目时间用于数据工作,这一比例接近表现不佳团队的 3 倍;调查图表显示,表现突出的团队和表现不佳的团队中,分别有 58% 和 21% 符合这一情况。
覆盖四个层级的数据溯源
Voxel51 3.0 新增了四个层级的数据溯源功能,Voxel51 首席架构师 Ritchie Martori 在一篇配套文章中于 2026 年 10 月 9 日对其作了详细介绍。部署级活动日志会显示谁执行了某项操作、操作发生的时间,以及操作影响的内容;数据集级活动日志会跟踪各个数据集内部的变更;样本级编辑历史会追踪标签、元数据和其他属性的变更;数据集版本管理则会保存不可变快照,让团队能够比较历史状态、复现工作流,并确定用于训练或评估的确切数据。
底层事件架构使用 fiftyone-mq 进行作业调度,并使用 Activity Core 跟踪事件,为审计日志、标注指标和作业监控提供共享基础。权限设置和工作流可见性会将每项数据变更与执行变更的人员或自动化作业关联起来。
不依赖特定模型的设计与 Nebius 研讨会
该平台在设计上与模型无关,因此团队可以使用自己的基础模型和领域专用模型进行嵌入、自动标注、推理和评估,而不必受限于预先定义的技术栈。公告指出,通用基础模型主要通过互联网文本和视觉数据进行训练,接触具身系统产生的多模态传感器数据的机会有限;除自动驾驶等少数资金充足的领域外,物理 AI 团队往往需要将基础模型与领域专用模型及自己的训练数据结合使用。
过去,要体验 Voxel51 的企业级功能,首先得与其团队联系;而在 3.0 中,用户可通过 app.voxel51.com 免费自助访问,仍可联系该公司获取自托管部署。Voxel51 还表示,正与 AI 云服务公司 Nebius 合作,开发者可在实践活动中使用 Nebius AI Cloud 运行嵌入和自动标注等工作流。两家公司将在加拿大和美国举办另外九场物理 AI 工作坊,活动将持续至 2026 年 11 月,目前已开放报名。












