很多人做网站,费了很大劲把页面内容搞得漂漂亮亮,然后天天盼着搜索引擎来收录。结果过了一段时间,site域名一看,页面确实被收了,但流量一点没涨。甚至有的页面,你搜一整个完整的标题都搜不到它。这时候心里就犯嘀咕了,这收录到底算数不算数?这种情况,说的就是无效收录。
什么叫无效收录?说白了,就是搜索引擎确实把你的页面存在了它的数据库里,但这个页面既没有获得排名,也没有资格参与排名。它就像一本被图书馆收进来的书,但放在地下室仓库里,没有编号,没有上架,读者怎么找都找不着。
你会发现一个特别奇怪的现象,就是有网站在后台提交了sitemap,快照天天更新,收录数量看着也挺好看,但就是没排名。这个里面最典型的,是把那些没有实际价值、或者说是重复拼凑的页面给收录了。搜索引擎的爬虫来了,走马观花看了一遍,觉得这个页面不能给用户提供什么好体验,但又没到严重违规需要直接清理的地步,于是就先放着,给一个“收录”的名分,却不给露脸的机会。
出现这种情况,原因其实挺多的。最让人头疼的一个,是页面内容质量确实低。现在很多公司找外包做的企业站,产品描述是从同行那边复制过来的,公司简介把成立时间和一堆荣誉堆上去,连个正常人都觉得没意思。搜索引擎现在非常聪明,它判断页面价值的时候,看的是能不能解决用户的问题。如果内容大部分是抄的,或者是从别处拼凑的,它当然不会给排名。
还有一种情况是页面里的代码或者结构有问题。你看着页面在浏览器里显示得挺好,但搜索引擎的爬虫在抓取的时候,拿到的其实是乱七八糟的HTMl标签。比如有的地方用了大量的JavaScript渲染,页面内容全是通过脚本动态加载的。爬虫来的时候,脚本没执行完,或者根本没执行,它能看到的就一个空壳或者一个框架。那这种页面就算被收录了,也什么都算不上。它不知道你页面里讲的是什么,想给关键词排名,也给不了。

再有一种情况,就是没有做内链或者外链来支撑。你想啊,搜索引擎收录了你的页面,它怎么知道这个页面重要不重要?除了内容本身,它还会看有多少其他页面在链接到它。如果你网站里的其他页面,或者站外的地方,都没有提到过这个页面,那它就相当于一个孤岛。搜索引擎会觉得,这可能就是一个随便填的废页面吧,既然都没人关注,那我也就先放一放。这种情况在小网站上特别常见,页面是收录了,但没有任何链接入口,排名自然就消失得无影无踪。
那我们怎么判断自己的网站是不是一大片无效收录呢?这里有个稍微残忍一点的办法。你在搜索框输入site:你的域名,然后翻到比较靠后的页面,看看那些被收录的页面。如果那些页面的标题是“欢迎使用网站后台管理系统”,或者是一些空的标签页,或者是一堆乱码,那就是无效收录无疑了。再一个,在搜索结果里显示出来的页面,如果描述内容都是空白的,或者显示的是乱码,这种也是。
真的遇到了这种问题,其实也不用太着急。首先,把网站的后台和那些没有任何实际内容的页面,该删就删。很多企业站的CMS系统自带一些默认页面,像什么标签页、作者页、一些空的分页,这些都要处理掉。然后用robots文件屏蔽掉那些没用的目录。紧接着,对所有页面的内容做全面排查,那些复制来的内容全部重写,哪怕写得不好,只要是你自己琢磨出来的,搜索引擎都能识别出来。然后再做内链,让每个被收录的页面都能有两三个其他页面的链接指向它,这个步骤特别关键。
总之,有效收录是一场持久战。你每天看着后台数据,总以为那些数字代表的是真实流量,其实那只是假象。搜索引擎是看实效的,内容有没有价值,结构清不清晰,链接通不通畅,这些兜不住,所谓的收录,到最后也不过是一场自嗨罢了。把基础打实了,把心思放在真正写出有用的信息上,无效收录的问题,自然会慢慢消退。