TA的每日心情 | 奋斗 2015-11-15 15:39 |
---|
签到天数: 16 天 [LV.4]偶尔看看III
|
google不收录网站的解决方法
本人个小站分别是月底和月初上线其中一个站在上线第天百度就成功收录另一个大约在第天百度也收录进去了此时google还完全没动静新站考察期收录得慢点还是可以理解的这是我当时的想法
一直到月中旬百度也就收录了个站的首页yahoo勤快点收了大约个页面这时候我就有点迷糊了在我印象中百度是个难伺候的主一般我的网站百度Vs谷歌的收录数量大约在:左右感觉百度的要求比google要严格得多为啥这次对我的新站考察期这么长?于是用同样的网站程序重新申请域名在另外的空间上架站天后百度google均正常收录看来google不收录我的站是有原因的
打开IIS日志检查googlebot的爬行记录看到googlebot只有访问网站首页的记录完全没访问其他页面的记录并且日志如下反映:
:: WSVC l Googlebot/+(+)
基本上googlebot每天从:左右开始到我的站爬行但是全部的爬行记录都是针对首页的在爬行记录的最后返回代码均为
在这里 代表的是什么?我查遍了google yahoo baidu 谈论 的很多可就是没有的解释这段时间人真的是要抓狂!后来终于发现了一篇文章谈到了的含义他是这样解释的
Google降权与 蜘蛛状态码 前几天以为自己服务器上的站点所有在Google降权在Google的Site结果里出现几种奇怪现象;
收录大减
所有网站首页Google捉取不完整(这是第一见到的奇怪现象)
网站IIS日志分析看到( 蜘蛛状态码)这也是第一次见到这
从以后分析网站所有给Google降权由于群站引起都是猜想起开始自己测试找到原因三天后更换了服务器ISP商也换了IP最后的测试结果是更换了IP后问题依然肯定了这情况与IP无关之后再测试是否与自己网站有关之后把自己的某一些网站转到了外省的空间里网站又变得了收录正常在此也肯定了不是自己网站的问题之后觉得就是自己服务器可能设置了什么或ISP商哪里设置的问题
一般正常的蜘蛛状态码 或 为正常的出现了 这情况在论坛里有人说是" 本地系统已经终止网络连接"我也查了相关资料原来是指Win系统网站错误提示的意思那自己就肯定了是这么回事当Google蜘蛛访问网站首页时当他只访问了网站的几K后网络就终止了他的访问就出现了这一种情况结果发现不是网站给Google集体降权 蜘蛛状态码也显示了不是自己网站问题而是ISP商的硬件防火墙所引起的
既然有可能是防火墙而且极可能是防火墙造孽那就验证一下防火墙是否对googlebot的正常抓取进行了拦截但是又不能把服务器直接放置在公网上进行测试那会成肉鸡的最后我用的读取网站的head和body记录在google不收录期间在myip查询我的网站head和body全部查询不出来总是显示error 当我把服务器直接接入到公网上再去myip查询我的网站head和body数据读取正常!看来确实是防火墙的问题
接下来的任务就简单了月号上去升级防火墙软件然后再反复用myip查询网站测试直到当你修改网站的关键字或者网站描述后在myip能正常显示你网站的数据为止防火墙搞定后继续观察IIS日志 已经完全消失取代的全部是 的正常访问记录号去google查了下没收录号去查还是没要崩溃了难道是windows server的问题?号早上起床后下定决心准备去重装服务器系统在下手前我去google上site了一下收录了页收录了页额滴神呐终于收录了yahoo都收了+了建站也超过个月了google的大更新也错过了他终于收录了我不知道应该是种什么样的心情
在解决google不收录网站的问题期间查阅了大量的资料比如IIS日志里win代码(Windows网络消息号码)详细列表还有一些其他的资料我放在自己的小论坛里了大家要是有兴趣可以去查一下在这里就不多说了
最后给我可怜的个站做点小宣传吧希望大大别K我www.skullcandy.cn derr
有同类站的一起做个链接吧在没被google收录期间出去找友情链接碰了好多钉子不是google瞧不起我的站确实是有原因的
|
|