LLM Evaluation
EvalMesh
MCP
分布式 LLM 评测调度，把评测任务打散到多家模型供应商。
Tools
AI testing tools
5 tools
What each tool does, what it costs, whether it ships an agent-facing surface, and whether it is still alive.
LLM Evaluation
DeepEval
Skill
原生基于 pytest 的 LLM 评测，60 多种指标。
LLM ObservabilityMaintenance mode
Helicone
LLM 可观测性代理——现已进入维护模式。
2026-03-03 被 Mintlify 收购并进入维护模式：仅提供安全补丁、bug 修复和新模型支持，没有路线图。Mintlify 正在主动协助客户迁移。
LLM Observability
Arize Phoenix
Skill
LLM 追踪与评测，可在 ELv2 许可下自托管。
Elastic License 2.0，并非 OSI 认可的开源许可：允许自托管，不允许作为托管服务转售。
LLM ObservabilityAcquired · ClickHouse
Langfuse
开源的 LLM 可观测性与追踪。
2026-01-16 被 ClickHouse 收购，与 ClickHouse 4 亿美元 D 轮融资同时宣布。ClickHouse 承诺核心部分保持 MIT 许可，自托管继续免费。