Not translated yet — showing the Chinese originals.

Industry & Practice · Tagged “计算机使用”

Research & Benchmarks2026-10-146 min
AgentHorizon：评测长程计算机使用任务上的智能体评判者（续）
续篇只收录附录 B：算力与输入表示、错误类型召回、换支架，以及去掉指令、截图或动作日志后的消融。去掉指令后平衡准确率接近随机。
Research & Benchmarks2026-10-1422 min
AgentHorizon：评测长程计算机使用任务上的智能体评判者
一千三百七十三条人工录屏上的配对评测表明，最好的智能体评判者 GPT-5.5 在困难子集上平衡准确率只有 80.9%。工具使用帮了它，却让开放权重的 Qwen 直接评判更好；最难认的是已经做完、却多做了未经请求动作的副作用。