Tools & Frameworks7 min read
AI GUI 测试的社区与工具:从视觉驱动到传统平台增强
视觉驱动的 Midscene、browser-use、UI-TARS,和做元素自愈、视觉回归的 Testim、Applitools、testRigor,解决的不是同一件事。这篇按执行、感知和断言把它们分开。
2026-09-28CodexQA team6 linked entries
用自然语言编写测试,覆盖 Web、移动端、桌面、邮件、短信和主机系统。
Actively maintained. No shutdown, acquisition or maintenance-mode notice on record.
测试以自然语言句子编写。渠道覆盖异常广泛,包括 2FA 流程、电话呼叫和主机终端。
视觉驱动的 Midscene、browser-use、UI-TARS,和做元素自愈、视觉回归的 Testim、Applitools、testRigor,解决的不是同一件事。这篇按执行、感知和断言把它们分开。
蚂蚁、邮储、科大讯飞、华为、字节、腾讯和铁路客运论文里,大模型做 UI 测试并不是同一层:有的生成脚本,有的看截图自己点,有的只是补回归代码。
GUI Agent 能把任务点完,不等于测出了缺陷。这篇按 2024 到 2026 年的综述和基准,分开任务完成率和真正的 GUI 测试。