Not translated yet — showing the Chinese originals.
Headlines & Launches//3 min
Holmes 正在做一套自主 QA 平台,帮助软件团队持续测试产品,跟上 AI 驱动的开发速度,而不再依赖人工测试流程。
Headlines & Launches//3 min
用自主 AI 智能体做软件测试与质量保障的土耳其创业公司 kayIQ.ai 已获得 50 万美元种子融资,并准备进行国际拓展。
Headlines & Launches//2 min
AI 测试创业公司 Meticulous 已完成 1500 万美元 A 轮融资,由 Redpoint Ventures 领投,用于加快其自主软件测试平台的开发。
Headlines & Launches//2 min
Sauce Labs 推出了 AI 驱动的发布保障平台 AURA,帮助企业按 AI 生成代码的产出速度去验证这些代码。
Headlines & Launches//2 min
Functionize 发布了 Studio,一个 AI 原生的软件质量平台,充当独立测试智能体,用于检验由开发者和 AI 编程助手共同构建的应用。
Headlines & Launches//2 min
测试平台 mabl 引入了更多 AI 能力,用来简化测试编写、调试和维护。
Headlines & Launches//2 min
SmartBear 宣布了一系列 AI 集成,覆盖 Anthropic Claude、GitHub、Atlassian Rovo,以及亚马逊云科技的 Kiro 开发环境。
Headlines & Launches//2 min
Tricentis 扩展了其 AI 测试产品组合,新增能力旨在加快测试创建,并改进企业软件验证。
Headlines & Launches//2 min
Applitools 扩展了自主测试能力,新增 AI 驱动的视觉校验和测试维护功能。
Headlines & Launches//2 min
是德科技为其 Eggplant 测试平台增加了更多 AI 能力,目标是降低自动化 UI 测试中的维护工作。
Research & Benchmarks//44 min
随着大语言模型(LLM)智能体越来越多地通过 MCP 等标准化协议与外部工具交互,工具接口设计成为一个关键却研究不足的因素。功能如何被分解为工具,会影响智能体能否选对工具并构造出合法参数。这一选择在边缘侧尤其关键:资源约束限制了哪些模型可以
Research & Benchmarks//39 min
大语言模型(LLM)智能体越来越多地通过工具使用以及与用户和环境的交互来执行多步骤工作流。然而,现有智能体评测大体以英语为中心,限制了我们对智能体在多语言场景下能力的理解。我们提出 BabelFlow,一套与具体基准无关的智能体化工作流:它
Research & Benchmarks//55 min
前沿模型在浅层文档/图表阅读任务上得分很高。在一次受控的数据室审计中,把证据移入埋没条件后,准确率下降,强制声明增加,工具调用增加,每个正确答案的成本也增加。置信度与基准校准并不能完全抓住错误答案;一起有记录的生产事故表明,捏造的结构性主张
Research & Benchmarks//21 min
智能体基准评测政策遵从,却假定每一条政策都能确定唯一正确的动作。自然语言政策会因沉默、歧义或自相矛盾而违背这一假定,从而允许多种站得住脚的解读,而单一金标准轨迹无法覆盖这些解读。我们对 τ²-bench 的两个领域做了审计,建立了此类政策漏
Research & Benchmarks//53 min
智能体评测在数值上可以是正确的,同时所度量的构念却不同于其标签所暗示的构念。我们对选定的 Praxa AI 实现文件、历史评测产物与运行记录做了一项回顾性度量审计。一份含 139 个用例的离线路由报告有 112 次通过、27 次失败,尽管门
Research & Benchmarks//32 min
生成式人工智能智能体的持续部署,所要求的不止是孤立任务上的成功。智能体必须在反复交互、条件变化,以及对共享工作流中人员的依赖之下仍然有用,尤其是当技术、人员与运营方面的扰动随时间累积时。我们提出**运行韧性**(operational re
Research & Benchmarks//38 min
现有基准并不检验语言智能体与人类用户的交互,也不检验其遵循特定领域规则的能力,而这两者对于把它们部署到真实世界应用都至关重要。我们提出 τ-bench,这一基准模拟用户(由语言模型模拟)与语言智能体之间的动态对话;该智能体配备领域专用的 A
Research & Benchmarks//31 min
尽管人工智能基准测试进步迅速,基准成绩在现实世界中究竟意味着什么,仍然不清楚。为了用人类能力来量化人工智能系统的能力,我们提出一项新指标:50% 任务完成时间视界(50%-task-completion time horizon),即人工智
Research & Benchmarks//36 min
BenchShield 讨论如何用形式化模型支撑的插桩,检查智能体评测里的奖励是否被篡改。
Research & Benchmarks//28 min
BenchShield 讨论如何用形式化模型支撑的插桩,检查智能体评测里的奖励是否被篡改。