很多人挂蜘蛛池就是干等,觉得蜘蛛来了就万事大吉。我第一回也这么想,结果半个月过去,蜘蛛来了不少,收录却没涨多少。后来才明白,池子只管把蜘蛛叫来,站内结构才是蜘蛛来了愿不愿意留下的关键。今天把这半年调结构的经验整理成六个动作,配张内链策略示意图,给正在挂池的朋友参考。

一、先说结论
结论一句话:池子解决的是蜘蛛来访量,站内结构解决的是抓取效率。两者配合着来,效果是加法甚至乘法;光挂池不调结构,等于把蜘蛛叫来又放走。
二、为什么挂池要同步调结构
蜘蛛来了以后,会顺着链接一层层往里爬。结构乱的站,蜘蛛爬几步就断头了,收录自然上不去。我那个站调完结构之后,同样的池子,蜘蛛来访量没变,收录却多了一倍,差距就在这。
三、动作一:理顺内链层级
把全站页面按重要程度排个序,首页、栏目页、内容页三层,重点词页面往上层靠。内链要有指向性,别让权重平均分。我把首页词页面的内链从四面八方的散链改成集中引流,两周后那个词排名就往前挪了。
四、动作二:统一URL规范
URL别一套参数一套伪静态混着来。我原来有上百个带问号参数的链接,蜘蛛抓了浪费额度。后来全部统一成伪静态,参数页该屏蔽的屏蔽,抓取效率明显上来了。
五、动作三:robots别乱挡
robots文件是很多人忽略的坑。我见过一个站,robots把整个后台目录都放行了,蜘蛛来了全去抓没用的页面,正经内容反而排后面。调成只屏蔽后台和隐私页,抓取权重立刻回到正轨。
六、动作四:面包屑和导航
面包屑导航不只是用户体验,也是蜘蛛爬行的指路牌。每层页面都加面包屑,蜘蛛就能顺着路径逐层深入。我加完面包屑之后,之前收录不了的三级页面开始陆续进库了。
七、动作五:消灭死链和重复页
死链是抓取黑洞,蜘蛛爬进去就是浪费时间。重复页更麻烦,两个页面抢一个词,权重自己跟自己打。我拿爬虫工具扫了一遍,修掉几十个死链,合并了一批重复页,收录量肉眼可见地涨。
八、动作六:保持更新节奏
结构调好了,内容更新节奏也得稳住。蜘蛛被池子叫来,发现站里三天两头有新东西,它就愿意常来;要是挂池期间一篇不发,蜘蛛来几趟就懒得来了。我挂池期间保持隔天更新一篇,效果比干等好太多。
九、注意事项和风险提示
提醒两句。一是别在调结构的同时频繁改域名换路径,改一次全站权重就要重爬一遍;二是结构调整别贪多,一次动一块,观察一周再动下一块,稳扎稳打。池子加结构双管齐下,收录效果才能最大化。

评论列表