Anthropic用chaos loop压测Claude Docs:20亿请求仅60次错误
摘要
Anthropic工程师Vivek Nair复盘Claude Docs于9月16日上线前的chaos loop实践:在镜像生产的staging集群上,Claude Code会话每天生成超100万条合成docs持续压测并修复故障,峰值同时运行30个sub-agents,最终20亿次请求仅出现60次服务器错误。
在Claude Docs正式上线之前,Anthropic选择了一条颇为激进的验证路径。工程师Vivek Nair近日复盘了这套名为chaos loop的实践:团队没有依赖常规的有限轮次测试,而是让系统在接近真实的高压环境中反复暴露问题、修复问题,直到稳定性达到可接受水平。
具体做法上,团队搭建了一个镜像生产环境的staging集群,由Claude Code会话在其中持续生成合成的docs内容并发起请求。据Nair披露,这套机制每天产生的合成docs超过100万条,形成不间断的压测流量。峰值阶段,系统同时运行30个sub-agents并行作业,以覆盖更多路径与故障场景。
高频压测的结果最终体现在上线数据上。Claude Docs于9月16日上线,整个chaos loop过程中累计处理约20亿次请求,而服务器错误仅记录到60次。这一比例意味着绝大多数异常在正式面向用户之前就已被发现和消化。
对AI基础设施团队而言,这次复盘的价值在于展示了一种思路:把AI编码代理本身纳入稳定性工程流程,用自动化代理承担持续的故障注入与修复验证,从而在发布前把风险压到较低水平。
本文由新大陆基于公开信息编辑整理
信息来源:AIHOT AIHOT原文 ↗