W&B Weave
Weights & Biases 旗下面向 AI 智能体生产环境的可观测与评估工具,能按真实执行顺序追踪会话与工具调用,并用评估 API 对比改动前后的表现,适合已在生产环境跑智能体、需要持续盯行为并做回归测试的 AI 工程团队。
W&B Weave 是 Weights & Biases 平台里面向 AI 应用和智能体的一块产品,解决的是「离线调好的智能体一上生产就不稳」这件事。它把线上运行产生的调用记录收进来,让团队看到智能体实际怎么走、在哪一步出错,再用评估把改动前后的表现对比出来。
主要功能
追踪部分把一次智能体运行拆成会话、轮次、步骤、工具调用和子智能体,按智能体真实的执行顺序展开,而不是只看单次调用。监控部分提供内置和自定义信号,自动给交互分类打标,发现异常可以通过 Slack 通知或 webhook 触发后续动作。
评估部分是一套命令式的评估 API,用来对比不同提示词、模型和 harness 的效果,配合可视化找出回退。Playground 可以在动手搭应用之前试模型和提示词,也能拿生产 trace 来排查线上问题。Guardrails 提供毒性、偏见、PII 检测、幻觉等安全评分,以及连贯性、流畅度、上下文相关性等质量评分。评估结果还能汇总成排行榜在组织内共享。
适合谁
已经在生产环境跑智能体、需要持续盯行为和做回归测试的 AI 工程团队。页面提到 Claude Code 这类编码智能体可以通过 MCP server 连上 Weave,读线上数据、跑评估、自己迭代。
费用与限制
页面有「TRY WEAVE FOR FREE」入口,定价页列出私有部署方案:Personal 版 $0/月,限 1 个用户席位,仅限个人项目、不允许商用;Advanced Enterprise 为定制报价,含 HIPAA、单点登录、审计日志等。云托管定价已迁到 CoreWeave Forge。界面为英文,登录和注册走 CoreWeave 的账号系统。