十月给客户交月报,site: 一查收录从 1800 涨到 3800,对方连说三个好。我把流量报表往下拉一格,自然搜索点击三十天里从 610 走到 640,基本没动。蜘蛛池两千条新收录只换来三十次点击,拆开一看全是空栏目页。
抽了一百条 URL,八成是 /category-xx/list-2.html 这类分页,还有主题自动生成的「暂无内容」列表。标题清一色「XX_蜘蛛池出租_第2页」,正文就一句「暂无内容」,一篇文章都没有。
空栏目页从哪儿冒出来的
分类建了没填,主题照样给每个分类生成列表页,翻页还带参数。七个池子站建了 40 多个分类,真有文章的不超过 12 个。另一种是分页,一页十五篇,五页以后没人点,URL 却一直在。这些页面挂在导航上,内链最多,蜘蛛每天都要路过一遍。
模板一样,蜘蛛为什么照收
不是它识别不了空页,是我们没让它别收。栏目页没写 noindex,分页也没限制抓取,URL 能打开、返回 200、有标题有导航,它就按常规路径收了。收录门槛从来不等于有价值。
三条自查,坐实了收录虚胖
一,site:域名 inurl:list,查分页被收多少,七个站加起来一千二百多条。二,翻三天日志按 URL 段统计,栏目页和分页占了请求量四成,文章页才三成多。三,抽二十条新收录页打开看首段,十九条是同一句「暂无内容」。
怎么把收录数字主动往下压
有导航位又没内容的分类,先填三到五篇;填不上的,模板加 noindex,follow,链接照传不进索引;真没价值就撤掉导航入口。分页只留前三页可抓,其余 canonical 指回第一页。标签页和归档页顺手一起清,这类页吃掉多少抓取,我在「抓取额度被标签和归档页吃掉的那部分」里算过。
四十天后的账,三个别做的事
四十天后收录从 3800 掉到 1900,看着像退步。可有流量的收录页从 210 涨到 340,日志里文章页请求回到七成,新发二十篇六天内全进索引,最慢那篇第九天。抓取没变多,只是不再浪费在空页上。
三个坑提一句:别拿收录总数当 KPI;别用 robots 封栏目,内链会跟着断;掉收录先别喊被K,多半是自己主动缩的。现在我看池子站报表,第一眼找的是「有点击的收录页」,不是那个总数。

评论列表