Not translated yet — showing the Chinese originals.
Industry & Practice · Tagged “线上效果”
Research & Benchmarks//8 min
美团 MTFM 在外卖多个精排场景全量。最显著的一条业务线订单增长超过 6%,但没有业务线名字和实验窗口。推理成本降 24.0%,192 GFLOPs 是计算量不是账单。
Research & Benchmarks//8 min
腾讯云 ADP 用华住会、尚美数智和美住美宿说明酒店 Agent 怎么测到能上线:一句话拆成四个并发任务,首 Token 5 秒内,常见客需准确率 95% 以上。调价缺数据时必须人工复核。
Research & Benchmarks//8 min
腾讯云 ADP 用邯郸公积金、宝安小宝和广西汇小二说明政企智能体不能只看回答准确率。年报把咨询 17 余万次和办结 230 余笔分开写。单笔从 15 分钟到 3 分钟。这些数不是对照实验。
Research & Benchmarks//10 min
美团服务零售搜索用三期实验把 LLM 语义表征放进精排。一期 20% 流量 14 天,长尾 BadCase@1 显著降 2.96pp。二期和三期分别是 7 天的 20% 与 10% 流量。三期订单 +0.32% 没有拆开两类特征。
Research & Benchmarks//8 min
腾讯云 ADP 把零售助手的评估拆成规模、效率、质量、转人工、内容生产和运营效果。乳品案例自述审核通过率 95%、效率提升 300%;TP-Link 上线一周转人工率 20%、出图率 70%。两家都没有对照基线。
Research & Benchmarks//7 min
Qwen-Coder-Qoder 在自建 Qoder Bench 上超过 Cursor Composer-1,Windows 终端命令准确率最多提高 50%。线上几周代码留存升 3.85%,工具错误降 61.5%,Token 降 14.5%。没有绝对分和样本量。