Label Studio 发布全新评估引擎与 Vibe Code 智能标注界面
在生成式 AI 与智能体（Agent）系统日益复杂的今天，数据标注与模型评估的质量直接决定了系统的鲁棒性与可用性。Label Studio 近日发布了重磅更新，正式推出了专为 AI 和智能体系统构建的新评估引擎（New Evaluation Engine），并重磅整合了Vibe Code，旨在解决当前 AI 团队在数据标注效率与模型质量监控上的痛点。
核心突破：构建 AI 时代的“人类评估层”
此次更新的核心在于 Label Studio 不再仅仅是一个标注工具，而是演变为一个可编程、可嵌入、多模态的评估基础设施。
- 全新评估引擎：Label Studio 推出了全新的评估引擎，专为 AI 和智能体系统设计。它支持自定义接口，允许开发者将复杂的评估逻辑（如 RAG 检索质量、Agent 任务完成度、多模态一致性）直接嵌入到标注与训练流程中。
- Vibe Code 集成：为了应对 Agent 开发中“代码即标注”的需求，Label Studio 引入了 Vibe Code 能力。这使得用户能够拥有与编程 Agent 同等的速度与灵活性，同时依托 Label Studio Enterprise 强大的后端进行数据管理与版本控制，实现了从“写代码”到“调标注”的无缝切换。
- 多模态与扩展性：新架构原生支持多模态数据（图像、视频、文本），并提供了丰富的扩展点，便于团队根据特定业务场景定制评估指标。
实际应用价值
对于开发者而言，这一更新意味着：**
- 自动化闭环：无需手动编写繁琐的评估脚本，即可通过 Label Studio 的 API 和内置模板，自动对 LLM 输出或 RAG 结果进行人类监督与评分。
- 智能体协作：利用 Vibe Code，标注任务可以转化为可执行的智能体任务，实现大规模、高并发的高效标注。
- 质量可追溯：结合 2025 年以来的工作流演进，新版本提供了更深度的分析能力，帮助团队量化标注质量对模型性能的提升贡献。
Label Studio 团队表示，此次更新旨在“构建 AI 和智能体系统的新人类评估层”，让数据质量成为驱动 AI 进化的核心燃料，而非瓶颈。
