-
为了防恶意刷量与抗突发高并发全站接入了分布式限流与熔断降级（Sentinel / Redis 令牌桶），搜索收录与关键词排名却断崖式暴跌？排查伪造蜘蛛打爆限流白名单致真蜘蛛频报 429、熔断降级返回 200 状态码投毒快照成海量软 404、降级骨架屏致正文脱落沦为薄内容与 Redis 限流抖动 fail-closed 阻断我踩过的几个深坑 为了防御恶意爬虫与突发高并发，全站上线了基于 Sentinel 与 Redis 令牌桶的分布式限流与熔断系统，收录与核心词排名却意外遭遇腰斩。本文深入复盘伪造爬虫 UA 耗尽共享配额致真蜘蛛频报 429、熔断降级返回 200 JSON 错误包被抓取形成海量软 404、异步骨架屏降级脱落正文沦为薄内容，以及 Redis 集群网络抖动触碰 fail-closed 阻断的生产排查与白名单加固实录。