• 如果您觉得本站非常有看点,那么赶紧使用Ctrl+D 收藏吧

太狗血了!分享一下张戈博客百度收录排名异常的检查记录

建站经验 admin 11个月前 (06-23) 113次浏览 已收录 0个评论

关注张戈博客以及喜欢转载张戈博客原创博文的朋友,应该都发现张戈博客现在的百度收录异常惨淡!而且,我还叮嘱哪些喜欢转载我博客博文的朋友,不要转载半个月内发布的文章,因为我以为几个月来百度不收录、排名下降严重的是因为我先后更换主题–>换用 360 网站卫士–>文章被人快速转载所致。

太狗血了!分享一下张戈博客百度收录排名异常的检查记录

我发现最蛋疼、最诡异的是,我发布的文章几个月都没被收录!!!然后我也默默的在心里把度娘骂了几个月,尼玛就算被人采集、被人第一时间转载也不至于不收录啊?

可实际有图为证:

太狗血了!分享一下张戈博客百度收录排名异常的检查记录

基本从 5 月份开始,发布的文章就不再收录,索引从 4800 掉到现在 1000 左右!

期间,我各种怀疑,是不是 robots 设置有误?是不是外链 go 跳转对搜索引擎封闭等措施带来惩罚?

直到。。。直到我今天心血来潮,想试下百度的 API 搜索接口,提供 sitemap 数据才发现抓取失败。

其实,在之前我就发现所有和 sitemap 数据提交有关的功能都提示抓取失败!但是尼玛,在百度抓取诊断检测相同的链接又是成功的!!

我以为是百度站长工具出现了暂时性的问题,还反馈过:

太狗血了!分享一下张戈博客百度收录排名异常的检查记录

直到今天,我还又反馈了一把:

太狗血了!分享一下张戈博客百度收录排名异常的检查记录

反馈完之后,我反复去看了下这个抓取失败结果:

太狗血了!分享一下张戈博客百度收录排名异常的检查记录

结果发现都是连接超时错误,DNS 解析是没问题的,确实是真实 IP,看来不是使用 CDN 的问题:

太狗血了!分享一下张戈博客百度收录排名异常的检查记录

继续看了几遍之后,我偶然点开了抓取异常这个工具,一看吓一跳,每天的连接超时居然将近一半!

突然灵光一闪,连接超时,好熟悉的字眼,不是 40X,也不是 50X。。。没错,就是防火墙拦截!

太狗血了!分享一下张戈博客百度收录排名异常的检查记录

赶紧登陆阿里云 ECS 看了下 iptables:

太狗血了!分享一下张戈博客百度收录排名异常的检查记录

看到了有 2 个网段被禁用,先尝试解封,然后回到百度更新了下 sitemap 试了下,居然成功了?!

太狗血了!分享一下张戈博客百度收录排名异常的检查记录

我次奥!真是这个网段被禁封造成的!成功后,我特意再次更新 sitemap。并看了下 nginx 日志,发现还真是 220.181.108 这个 IP 段的 IP,尼玛,巧就巧在百度抓取诊断工具不在这个网段,可以正常抓取,迷惑了我几个月!!!

太狗血了!分享一下张戈博客百度收录排名异常的检查记录

事后,我努力的回忆了一把当时为什么禁用了这 2 个网段。。。

记得,当时是 Begin 交流群里有个人采集我的整个博客。我当时用了各种办法禁止他采集内容中的盗图,最终他用了搜狗的图片接口来采集我博客的图片。我就不好怎么禁止了,因为搜索引擎来的 IP,CDN 是自动回源的!

于是,我图省事直接把搜狗的图片接口 IP 的整个网段都给禁封了!尼玛,当时也没想过百度和搜狗的蜘蛛节点可能在同一个机房了??另外恶狠狠的诅咒下,采集个人博客者木有小 JJ!!

几个月的时间,对 SEO 带了非常严重的影响!要不是运气好,突然想到了这么一桩,这博客的百度 SEO 就基本废了!

废了也没什么,关键不明不白,谁也不爽吧!此次解除禁封之后,相信不出一个月,应该就会有效果了,至少最新发布的文章是会被收录的,不看别的,就见证下本文一个星期会不会被收录吧!不过之前未收录却被转载走的文章算是废了,发出去虽然推送到了百度,但是百度却没抓取到内容,被人转了之后估计被识别成首次发布的原创了吧!

好了,本文算是一个吐槽贴,也是给一些网站降权、收录异常的朋友一个参考,某些时候,收录异常、网站被 K 站不一定是你 SEO 方面的问题,一定记得看看是不是服务器把蜘蛛挡在门外了哟!


后续跟进篇

2015-11-02:再去百度站长平台查看抓取异常和抓取时间,可以发现已复到正常水平:

太狗血了!分享一下张戈博客百度收录排名异常的检查记录

太狗血了!分享一下张戈博客百度收录排名异常的检查记录


39MO , 版权所有丨如未注明 , 均为原创丨转载请注明原文链接:太狗血了!分享一下张戈博客百度收录排名异常的检查记录
喜欢 (0)
[1353713598@qq.com]
分享 (0)
发表我的评论
取消评论
表情 贴图 加粗 删除线 居中 斜体 签到

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址