如何检查网站死链：异常恢复后怎样区分缓存过期与真正修复
📱 Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; ClaudeBot/1.0; +claudebot@anthropic.com)
🔗 /181a54b365fc.html
📄
如何检查网站死链：异常恢复后怎样区分缓存过期与真正修复
先看一个可操作的判据：如果同一URL在源站返回的状态码已经稳定，而外部工具仍显示旧结果，差异通常来自缓存层或抓取快照；如果源站状态码本身仍在变化，那就不是缓存问题，而是修复尚未完成。区分这两者，决定了你是继续等待缓存刷新，还是回到服务器配置继续改。
先确认源站状态，再判断外部结果是否可信
异常恢复后最容易犯的错误，是拿第三方工具的结果当作唯一依据。正确顺序是先用不经过CDN、不经过反向代理的直连方式请求目标URL，拿到原始响应头。重点看三项：状态码、Cache-Control、Age。如果直连返回200，而带域名的请求仍返回404或301，说明中间层还在提供旧响应。
这一步会直接改变下一步动作。源站正常但边缘节点异常，处理对象是缓存刷新；源站本身就返回404，那么刷新缓存没有意义，必须回到路由或重定向规则。两者混淆会导致反复提交刷新却看不到变化。
一个假设例子：某旧活动页从301改为410，直连显示410，但带CDN的请求仍显示301，且Age值很大。这说明边缘缓存尚未过期或被规则锁定，此时应先确认缓存键和TTL设置，而不是继续改源站。若直连也返回301，则说明重定向规则根本没生效，缓存只是忠实反映了错误配置。
缓存过期的典型信号与真正修复的信号
缓存过期的表现有共同特征：响应头里存在较老的Date或较大的Age；不同节点返回不一致；强制加随机查询参数后结果会变。真正修复则表现为：多次请求、不同节点、带与不带查询参数，结果一致且稳定。
- 缓存信号：仅部分节点异常，直连正常，刷新后短暂正常又回退。
- 修复信号：直连与边缘一致，连续多次请求状态码不变，旧URL不再出现在站内链接中。
- 混合信号：状态码正常但页面内容仍是旧版本，这属于内容缓存而非死链问题，需要分开处理。
这里要避免一个推断错误：抓取量或请求量归零，并不能单独证明修复正确。它也可能是抓取预算转移、站点地图未更新、或外部链接自然减少造成的。需要结合直连响应和站内链接检查一起判断。
两种条件下该做哪个选择
条件一：源站已稳定，只有边缘节点异常。此时应执行缓存刷新或等待TTL自然过期，并记录刷新时间点，在下一个观察周期复查同一组URL。动作的结果是：如果刷新后恢复一致，说明问题在缓存层，后续只需调整缓存策略；如果刷新后仍异常，说明缓存键或规则配置有误，需要检查是否按URL、按Host或按Cookie分片。
条件二：源站状态码仍在波动。此时不应依赖任何缓存刷新，而应回到应用层或服务器层排查。常见原因是重定向链未清理、旧系统仍在响应、或规则优先级冲突。动作的结果是：修正规则后直连先稳定，再观察边缘是否跟随；如果直连稳定而边缘不跟随，才回到条件一的处理路径。
选择依据可以概括为一句：先让源站成为唯一可信来源，再让缓存去对齐它。顺序颠倒会让判断失去基准。
旧内容退出时，保留部分价值的具体做法
旧页面退出不只有删除一条路。若该URL仍有外部链接或搜索流量，直接返回404会让这些入口失效；返回410则表达明确移除意图，但是否被支持需要分别核查不同搜索引擎的说明。更稳妥的做法是先判断是否有可替代内容：有，则做301到最相关的新页面；没有，且确认不再需要，则用410并同步清理站内链接和站点地图。
执行时有一个容易忽略的动作：检查站内是否还有指向该URL的链接。如果站内链接未清理，即使服务器返回410，爬虫仍会不断发现并请求这个地址，造成反复异常。清理站内链接后，再观察外部请求是否下降，才能判断退出是否彻底。
需要说明的是，robots.txt的抓取限制不等于索引移除，它只阻止抓取，不保证已索引的URL从结果中消失。站点地图也不保证收录，它只是提示。把这两者当作修复手段，会掩盖真正的问题。
验证阶段的最小清单与例外
验证时至少覆盖三类请求：直连源站、带域名的正常请求、带随机参数的请求。三类结果一致，才可初步认为修复稳定。若不一致，记录差异出现在哪一层，再决定是刷新缓存还是改配置。
例外情况也要留出空间：有些旧系统会在夜间重建缓存，白天看到的一致可能只是暂时状态；有些CDN的刷新有延迟，刚提交后立即复查容易误判。因此观察周期应跨越一个完整的缓存重建窗口，而不是提交后马上下结论。HTTPS同样不保证安全无漏洞或排名，它只是传输层的一环，不能替代对死链本身的检查。
最终判断标准不是某个工具显示绿色，而是源站、边缘和站内链接三者指向同一状态，并且这个状态在多个时间点保持稳定。达到这一点，才可以进入下一步的内容或链接策略调整。
