跳到主要内容
Vantaige
Arize Phoenix screenshot
Arize Phoenix logo

Arize Phoenix

免费增值

Arize Phoenix 是一款开源的、原生支持 OpenTelemetry 的 LLM 应用和智能体可观测性与评估平台。它能追踪每一次调用,使用 50 多种内置评估器进行打分,并支持免费自托管,是追求供应商中立的团队的标准选择。

功能:APIOpen Source

Arize Phoenix 是一款针对 LLM 应用和 AI 智能体的开源可观测性与评估平台,由 Arize AI 开发。这家位于旧金山的公司成立于 2020 年,最初是一家机器学习监控工具提供商。该平台的诞生是为了解决一种特定的“盲区”:如果没有插桩(instrumentation),LLM 和智能体的故障、幻觉、糟糕的检索、提示词退化以及失控的工具循环几乎是不可见的。Phoenix 将模型调用的每一步捕获为追踪(trace),使用内置评估器对其进行打分,并为工程师提供查找和修复故障的工作流。定义其核心的架构决策是,Phoenix 基于 OpenTelemetry 和 OpenInference 约定构建,因此它可以与您已经使用的任何框架或提供商无缝配合,并且您可以免费自托管整个系统。

Phoenix 提供的追踪功能将提示词、检索、工具调用、Token 和延迟呈现为跨度树(span trees),内置 50 多种基于研究的 LLM-as-judge 评估器(不仅返回分数,还提供解释),支持用于系统性前后对比的数据集和实验,提供提示词管理,以及继承自 Arize 机器学习基因的嵌入漂移(embedding-drift)分析。内置的 AI 智能体 PXI 可以在工具内部调试追踪并迭代提示词,此外 Phoenix 还提供了一个 Model Context Protocol 服务器,以便编程助手可以直接查询追踪数据。它在 Elastic License 下免费提供,并带有可选的托管版 Phoenix Cloud,而独立的商业平台 Arize AX 则增加了企业级功能。Arize 在 2025 年 2 月筹集了 7000 万美元的 C 轮融资,因此该项目绝非边缘实验。

Arize Phoenix 在 2026 年 6 月的插桩能力

其核心循环是:插桩、追踪、评估、迭代。您只需使用兼容 OpenTelemetry 的库添加几行代码,Phoenix 就会记录 LLM 调用链的每一个跨度(span),然后让您在这些跨度上运行评估器,以对忠实度、相关性、幻觉、有害性等进行评分。由于评估器会返回解释,您不仅能知道某个跨度被标记,还能知道原因。追踪数据可导出为数据集,数据集用于实验,而实验让您能够将新的提示词或模型与固定的基准进行比较。嵌入分析视图是 Arize 监控传统的延续,它可以对异常值进行聚类并检测漂移,这对于 RAG 系统非常实用。这种发展势头背后有真金白银的支撑:Arize 于 2025 年 2 月 20 日宣布了 7000 万美元的 C 轮融资,由 Adams Street Partners 领投,M12、Datadog 和 PagerDuty 参投,这被誉为迄今为止 AI 可观测性领域最大的一笔投资,而 Phoenix 的月下载量已超过 200 万次。

Phoenix 与 Langfuse 和 Braintrust 的对比

定位 Phoenix 最清晰的方法是将其与团队常用来做对比的两款工具进行比较。

“如果你使用 LangGraph,LangSmith 是正确的选择。如果你不依赖特定框架,选 Langfuse。如果评估的严谨性是首要任务,选 Arize Phoenix。”——工程可观测性回顾,2026 年 3 月。

Langfuse 采用 MIT 许可证,而 Phoenix 使用 Elastic License。如果您想转售或嵌入该工具,这一点很重要,因为 Phoenix 的许可证禁止这样做,而 Langfuse 允许。Langfuse 还转向了 ClickHouse 后端,并于 2026 年 1 月被 ClickHouse 收购,这使其分析规模突破了 Phoenix 的 PostgreSQL 存储大约 2 亿个跨度的上限,并且它在云端和自托管之间提供了完全的功能对等。Phoenix 则以更深度的评估原语和源自机器学习传统的漂移检测作为反击。Braintrust 采取了相反的理念,它是一个评估优先、原生支持 CI/CD 的专有 SaaS,没有免费的自托管层,而 Phoenix 则是 OpenTelemetry 优先和自托管优先。对于希望将评估作为合并拦截质量关卡的团队来说,Braintrust 胜出;而对于需要供应商中立和免费自托管的团队来说,Phoenix 则是赢家。

开源边界,以及 Arize AX 的起点

Phoenix 开源版是免费的,没有跨度或保留期限的限制,可通过 Docker 或 Kubernetes 在您自己的 PostgreSQL 上自托管。Phoenix Cloud 为小型团队增加了一个免费的托管选项。付费产品则是另一回事:Arize AX,其免费层每月提供 25,000 个跨度,升级到 AX Pro 每月 $50,包含 50,000 个跨度(超出部分每百万跨度 $10),最高级别是 AX Enterprise,提供 SOC 2、HIPAA 合规、带数据驻留的自托管以及对实时流量的在线评估。值得注意的是,从 Phoenix 升级到 AX 是一份新的销售合同,而不是透明的层级提升,并且 AX 基于跨度的定价在智能体工作负载上攀升得很快,因为一个用户操作可能会产生数百个跨度。比较评估平台的团队还应权衡 Weights and Biases,其 Weave 产品从实验追踪的血统出发,涵盖了类似的领域。

Phoenix 的局限性

最具体的限制是规模。使小型追踪易于阅读的跨度树 UI 在大型智能体运行中变得笨重,而且 PostgreSQL 后端确实存在上限。

“我们在大约 2 亿个跨度和略超 2TB 的数据量时达到了峰值,我们的 phoenix 部署基本上已经无法正常工作了。”——Dillon D.,Arize 社区论坛,2025 年。

除了原始规模之外,Phoenix 显示的是跨度树而不是易读的对话记录,这减慢了多轮智能体调试的速度。此外,它的访问模型仅限工程人员,因此产品经理或领域专家在没有 Python 和工程帮助的情况下无法上传数据集或审查结果。评估器对于趋势监控很有用,但并非绝对可靠,据记录,幻觉裁判与人类标签的一致性约为 82%,误报率为 12%,因此它们应该用于辅助决策,而不是自动做出决策。对评估完整多轮轨迹的内置支持也落后于单提示词评估。

Phoenix 适合谁,谁会超越它

Phoenix 非常适合希望以零平台成本获得自托管、供应商中立的可观测性的机器学习和 AI 工程师,适合有数据驻留要求、需要将追踪数据保留在本地的团队,适合受益于 OpenTelemetry 插桩的多框架团队,以及任何重视具有统计严谨性的深度评估原语的人。已经在使用 Arize AX 的团队将 Phoenix 作为本地开发的补充。

对于需要无代码审查工作流的非技术利益相关者,对于超出自管理 PostgreSQL 处理能力的极端追踪量(除非您升级到 AX Enterprise),以及对于能从 LangSmith 的深度逐节点集成中获益更多的 LangChain 优先团队来说,它不是合适的工具。希望使用自动化 CI/CD 关卡来拦截部署的团队最好使用 Braintrust 或 Opik,而任何想要转售或嵌入可观测性层的人都应该选择像 Langfuse 这样具有宽松许可证的选项,因为 Elastic License 禁止这样做。

用户评价

暂无评价,快来分享你的第一条体验吧!

登录 后即可撰写评价。

相关文章

与 Arize Phoenix 相关的指南和文章。