网站首页 » 网站运营 » 搜索引擎 » 通过robots.txt禁止搜索引擎收录网站页面让我长了不少见识
上一篇:
下一篇:

通过robots.txt禁止搜索引擎收录网站页面让我长了不少见识

网站最大的价值就是通过搜索引擎收录,把内容推送到用户面前,可有很多时候,因为种种原因,我们会对网站的robotx文件进行设置,以达到拒绝搜索引擎收录的效果,这次给大家分享下通过robotx文件禁止所有搜索引擎收录网站页面后网站的一些数据变化情况。

由于之前备案信息的修改,不得不重新提交备案信息到管局审核,为了审核通过,网站页面不得不作调,由于调整比较大,所以为了网站不被搜索引擎惩罚,我把 robots文件设置成了禁止所有搜索引擎访问。今天2015年9月6日,备案信息审核通过,短短闭关13天,网站的数据发生了很大的变化。

网站索引量从开始的665下降到现在的440,网站排名(关键数量)少了一半,虽然原来就不多(8个),但这对于刚上线不久的网站来说也是不少的损失呀。这里有一个值得注意的是关键词排名上面波动好像不是很大,只是在数量上少了很多。

robots.txt禁止搜索引擎收录

我在百度site:yunkus.com结果显示的收录量也是440,可我在好搜中site:yunkus.com,竟然只出现了一个结果(首页)。在这 里我们不难看出,对于robots.txt禁止搜索引擎收录,百度处理方式与好搜在处理方式是不一样的,以前很多人担心好搜不按robots文件权限来访问网站的事已经成为了过去式。而google搜索引擎的处理方式与百度差不多,也会保留以前的收录页面。我们不能对这两种处理方式作好与坏的判决,因为我 觉得这两种处理方式都各有优缺点。

在这13天里,我也停止了推广网站,什么都没做。可网站的流量还是稳定在三四下左右,不难看出前期的网站推广,如:外链建设的重要性了,虽然搜索引擎现在 对外链的质量要求越来越高,但你要知道你的外链除了做给搜索引擎看外,更重要的是要展现在用户面前。我个人觉得,由于百度算法的不断完善,如:百度的绿萝算法2.0,直指低质量的外链,所以以后对外链的质量要求只会越来越高,现在的外链更多的地做给用户看,而不是做给搜索引擎看(除非外链质量很高,或者达 到百度算法的标准)。

在这里也不得不说下,在这期间网站的跳出率变渐渐的由原来的50%上升到了80%多,这里有两种情况可以解释这个现象。第一,网站首页只放了篇为了让审核通过,但与网站主题内容无关的文章,并且连导航都没有,而外部链接有很多是指向首页的,用户通过链接进入到网站首页,一看首页要求都没有,只有一篇极不相 关的文章,这会让用户觉得自己被骗了,即没有想要的内容,也不上像正常的网站那样,有导航什么的,想到这不得不让用户觉得有上当了的感觉,马上关闭窗口。 还有一种情况就是内页的外部链接,用户通过链接访问网站内页,虽然访问这个链接的页面没问题,并且通过这个页面里的导航或者链接点击访问的页面也没问题, 可现实总是很残酷,用户一般都会点击网站首页,看看网站的主题是什么,可以为自己提供什么形式的内容和服务,可点开首页一看,感觉不对劲,马上拍拍屁股 走人。而这也很好的解释了网站的PV下降的原因所在了。说到外链,我在站长平台里看到的外链数量在这期间是有略微增加的,这又是链接回事,我只能想一个原因了,那就是别人转载了我的文章,并且加上了链接。这可不可以说明,robotx的禁止对外链的影响只是很小很小呢?!

robots.txt禁止搜索引擎收录

还有一个就是百度联盟,当我恢复首页后(之前就只修改了首页,其它的页面没作修改,联盟广告代码全部删掉),首页的广告在联盟后台查看都显示已经失效,而 首页对应的广告位还是可以显示的,并且还是可以正常点击的,在这里就给各位提个醒,不管网站作了怎么修改,只要广告代码没在网站页面上一时间,广告就会进入失效状态,只不过不知道现在把代码放回页面,过几天会不会自动生效,自己最好作详细的检查,以免因为网站操作,而导致联盟收入下降那就不好了,毕竟这些 都是辛苦钱!

补充:2015年9月7日,我再看了下百度联盟后台,之前显示无效的广告,都已经自动生效了。说明联盟广告代码会自动检测网站有没有把广告代码放上去的,有则正常显示,无则显示无效。从有效到无效好像时间会长一点一般都需要好几天,而从无效到再次生效时间就非常地短了,一天都不用。在这里不得不称赞下百度的贴心。

每一次折腾,都会有收获,只是在这个过程当中你需要付出代价,不过我觉得现在付出的代价是值得的,因为这段经历会让我成长很多,并且以后可能会带来不可限量的可能。

  • 微信扫一扫,赏我

  • 支付宝扫一扫,赏我

声明

原创文章,不经本站同意,不得以任何形式转载,如有不便,请多多包涵!

本文永久链接:http://yunkus.com/robots-forbidden-site-contains-broaden-my-horizon/

发表评论

电子邮件地址不会被公开。 必填项已用*标注

评论 END