Arize Phoenix
简介
开源 LLM 可观测与评估平台:基于 OpenTelemetry 追踪 LLM/Agent/工具调用链,配套数据集驱动的评估体系,可自托管、厂商中立。
English
Open-source LLM observability: OpenTelemetry-based tracing for LLMs, agents and tools, plus dataset-driven evals — self-hosted and vendor-neutral.
适用场景
- 需要自托管的 LLM 调用链追踪(数据不出内网)
- 想建 Golden Dataset 做持续评估
- 多框架混用需要统一遥测标准
快速上手
- pip install arize-phoenix,本地起服务
- 给 LangChain/OpenAI 应用加 tracer 注解
- UI 里查看 span 级调用链与耗时分布
- 导出生产 trace 构建评估数据集
标签
相关资源
ComfyUI
开源节点式生图工作流引擎:把模型、采样、控制条件连成流水线,可控性和复现性最强,本地跑免费用,进阶玩家的终极选择。Open-source node-based image generation workflow engine with maximum control and reproducibility — the power user's choice.
OpenHands
原 OpenDevin,开源的 AI 软件工程师 Agent:能改代码、跑命令、浏览网页、提交 PR,在 SWE-bench 上表现领先。Formerly OpenDevin: an open-source AI software engineer that edits code, runs commands, browses and opens PRs.
Composio
面向 Agent 的工具集成平台:250+ 应用(GitHub、Slack、Notion 等)的开箱即用工具与鉴权管理,支持 MCP 输出。Tool integration platform for agents: 250+ ready-made app tools (GitHub, Slack, Notion...) with auth management and MCP support.