CodexQA
工具

AI 测试工具

8 个工具

每个工具做什么、收多少钱、有没有面向 agent 的接口、以及它还活着没有。

LLM 评测

EvalMesh

MCP

分布式 LLM 评测调度,把评测任务打散到多家模型供应商。

开放内核免费增值MIT累计融资 $9.5M官网 ↗
红队与安全

Sentinel Red

技能

面向 LLM 应用的开源红队框架,自带 agent 技能。

开源免费Apache-2.0官网 ↗
LLM 评测

DeepEval

技能

原生基于 pytest 的 LLM 评测,60 多种指标。

开放内核免费增值Apache-2.0官网 ↗
LLM 可观测性

Arize Phoenix

技能

LLM 追踪与评测,可在 ELv2 许可下自托管。

Elastic License 2.0,并非 OSI 认可的开源许可:允许自托管,不允许作为托管服务转售。

开放内核免费增值ELv2官网 ↗
红队与安全被收购 · OpenAI

Promptfoo

技能

声明式 LLM 评测与红队测试,质量回退即让构建失败。

2026-03-09 被 OpenAI 收购;团队承诺继续保持 MIT 许可,相关技术并入 OpenAI Frontier。收购时拥有 125,000 多名开发者和 30 多家财富 500 强客户。

开源免费增值MIT官网 ↗
传统工具 + AI

Playwright

MCP技能

Agent 生态事实上的标准浏览器自动化框架。

开源免费Apache-2.0官网 ↗
传统工具 + AI

Keploy

技能

用 eBPF 捕获流量,回放为带 mock 的集成测试。

开源免费Apache-2.0官网 ↗