蜘蛛池出租蜘蛛池出租

13年专注蜘蛛池技术

蜘蛛池换服务器后蜘蛛仍在爬旧IP,新文半个月没收录

换完服务器第十天,我翻抓取日志发现蜘蛛来的还是老机房那个段,新发的两篇一个字都没进索引。域名 ping 过去明明是新的,问题出在蜘蛛那一侧:它记着的解析结果还没到期。

换服务器不是改个A记录就完事

解析改完,我们这边几乎立刻生效,蜘蛛那边不一定。它存着上次解析的结果,多久来问一次由 TTL 说了算。我们三台池子共用一个域名池,上一手交接时 TTL 写的是 86400,等于一天才问一回,改完当天它根本不知道。

日志里三行字最能说明问题

一是请求来源 IP 还落在老机房段里;二是新机的 nginx 日志十天只有零星几次探测,正常该是每天几百条;三是旧机上那些页面还在回 200,内容却是三个月前那一版。放着不管,蜘蛛觉得地址没变、内容也没变,自然不急着来。

域名解析从旧服务器IP切换到新服务器IP的对比示意图

旧IP为什么还能回200

三个原因叠在一起。CDN 的回源地址没跟着改,还在往旧机打;旧机没下架,站点照旧挂着;解析面板里 @ 和 www 只改了一个,另一个还是老 IP。我核对时发现 www 那条确实漏了,蜘蛛很多请求恰恰走的就是带 www 的地址。

四步收拾干净

先把 @、www、m 几条解析逐条列出来对,别只扫第一行。然后把 TTL 临时调到 300 秒,等一天让全网缓存过期,再调回 3600。旧机先别关,配一条 301 指到新地址,摸到旧机的请求还能顺过去。最后去站长平台重新提交 sitemap,点一次抓取诊断,看它解析出来的到底是哪个 IP。CDN 那块单独刷新回源,回源配置里写死 IP 的地方也得改,光清缓存不够。

时间线复盘

第 3 天日志里开始出现新 IP,第 7 天新文进索引,第 12 天旧 IP 的请求掉到个位数。前后 15 天,其中 10 天纯粹在等 TTL。这块和 CDN 缓存旧页那篇是一类毛病,缓存不认你改没改。

三个坑

TTL 写 60 秒看着激进,有些解析商不认,最短一般给到 300;旧机 301 之后起码再挂一个月,我见过关了才想起来跳转的;域名池几十个域名一起换更别一次性全动,我分了三批,每批换完盯两天日志再动下一批。下次换机,我会先把 TTL 调小两天再动解析,省掉那十天白等。

换服务器这活儿,技术上是半小时的事,慢的是别人家的缓存。

版权声明:本文为 “蜘蛛池出租” 原创文章,转载请附上原文出处链接及本声明;

原文链接:https://www.vikiseo.com/post/59411.html

相关文章

评论列表

发表评论:

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。

«    2026年11月    »
一 二 三 四 五 六 日
1
2345678
9101112131415
16171819202122
23242526272829
30

搜索

控制面板

您好,欢迎到访网站!
  查看权限

网站分类

最新留言

标签列表

最近发表

作者列表

站点信息

  • 文章总数:12950
  • 页面总数:3
  • 分类总数:7
  • 标签总数:40
  • 评论总数:20300
  • 浏览总数:4872367

友情链接