前几天有个做企业站的朋友发消息给我,说他的网站收录量一夜之间从三百多条涨到了两万多,问我是不是要起飞了。我让他先别激动,把百度站长平台的数据截图发过来。看完之后我跟他说,这大概率不是什么好事。
收录量暴增这件事,得拆开来看。搜索引擎的收录逻辑其实不复杂,它发现一个URL,抓取,然后判断要不要放进索引库。正常情况下的收录增长是线性的,今天涨几十,明天涨一百,跟网站更新频率和内容质量挂钩。如果出现断崖式或者爆炸式的增长,基本可以判断是某个环节出了异常。
最常见的一种情况是搜索引擎调整了索引策略。百度每年都会有几次比较大的算法更新,有时候会放宽某些类型页面的收录门槛。比如前几年百度对移动端适配的页面做了一轮集中收录,很多站点一夜之间收录翻倍。这种属于被动收录,流量不一定涨,因为页面本身质量没变,只是搜索引擎暂时把它们放进了索引库。过一段时间算法回调,这些页面又会被踢出去。
另一种情况更麻烦,就是网站被采集站或者镜像站盯上了。你的内容被批量复制到其他域名下面,搜索引擎分不清谁是原创,把那些复制页面也收录了。这时候你查自己的收录量,可能看到的是自己域名下的页面,但排名和流量都被别人拿走了。更糟的是,如果对方用了一些技术手段,比如泛解析或者站群,搜索引擎可能会把你的站点判定为低质量内容的源头。
还有一种是网站本身的技术结构出了问题。比如改版的时候不小心生成了大量带参数的URL,或者标签页、分页没有做好 canonical 标注,搜索引擎就会把这些重复页面全部收进去。我见过一个案例,一个博客站因为分页设置错误,每篇文章生成了几十个翻页版本,收录量直接从两千涨到八万,但真实流量反而掉了三成。

怎么判断收录暴增是好事还是坏事,看一个指标就够了:流量有没有同步增长。如果收录涨了十倍,自然搜索流量纹丝不动,那这些收录就是无效的。你可以去站长平台看“索引量”和“流量”两条曲线,正常站点这两条线是正相关的。如果索引量飙升而流量曲线平的像一条直线,说明搜索引擎收了大量低质量页面,这些页面在索引库里占着位置,但用户搜不到,也不会点。
更隐蔽的一种情况是网站被黑了。攻击者在你服务器上挂了很多隐藏页面,比如博彩、医疗类的垃圾内容,搜索引擎抓取后大量收录。这种收录暴增往往伴随着快照被篡改、标题被改、甚至站点被降权。如果你发现收录的页面标题里出现了莫名其妙的词,或者 site 查询出来的结果跟你实际内容对不上,那就要赶紧查服务器日志和文件完整性。
遇到收录暴增,先做三件事。第一,去站长平台提交死链,把那些明显不是自己内容的URL清理掉。第二,检查 robots.txt 和 sitemap,看看有没有被恶意篡改。第三,在百度搜索资源平台里看“抓取频次”和“抓取异常”,如果抓取频次突然飙高但流量没涨,说明搜索引擎在大量抓取低质量页面,这时候要主动限制抓取。
说到底,收录量只是一个中间指标,它代表搜索引擎愿意把你的页面放进索引库,但不代表这些页面能获得排名和点击。真正该盯的是自然搜索流量和关键词排名。一个健康的站点,收录量应该是稳步增长,流量曲线跟着往上走。如果收录量突然拉出一条陡峭的直线,而流量还在原地踏步,那这条直线大概率是个坑。
我那个朋友后来按我说的查了一遍,发现是被一个采集站批量抓了内容,对方用了泛域名,每个子域名都复制了他的文章。他提交了侵权投诉,又在 robots.txt 里屏蔽了那几个IP段,折腾了半个月,收录量才慢慢回落。他跟我说,早知道就不该光看收录数字,差点白高兴一场。