当前位置:成都网络营销公司 > 网络营销 >

搜索引擎蜘蛛不抓取网站的原因有哪些?

来源: 成都网络营销 时间:2018-10-23

  详细站长朋友在优化网站的时候都会碰到这样一个问题,在查看搜索引擎蜘蛛抓取日志的时候发现蜘蛛有好几天没有过来抓取了,但是网站每天都还是在正常的更新,那这是什么情况了,这时候我们就需要看看搜索引擎蜘蛛抓取是否有异常了,如何看呢,睿谷联创专业营销型网站建设公司建议大家可以从以下两个方面去了解。

  搜索引擎蜘蛛抓取异常的原因有哪些

  第一、链接异常

  1、找不到页面:爬虫发起抓取,httpcode返回码是404。

  2、服务器错误:爬虫发起抓取,httpcode返回码是5XX。

  3、访问被拒绝:爬虫发起抓取,httpcode返回码是403。

  4、其他错误:爬虫发起抓取,httpcode返回码是4XX,不包括403和404。

  第二、网站异常

  1、dns异常:当Baiduspider无法解析您网站的IP时,会出现DNS异常。可能是您的网站IP地址错误,或者域名服务商把Baiduspider封禁。请使用WHOIS或者host查询自己网站IP地址是否正确且可解析,如果不正确或无法解析,请与域名注册商联系,更新您的IP地址。

  2、连接超时:抓取请求连接超时,可能原因服务器过载,网络不稳定。

  3、抓取超时:抓取请求连接建立后,下载页面速度过慢,导致超时,可能原因服务器过载,带宽不足。

  4、连接错误:无法连接或者连接建立后对方服务器拒绝。

  睿谷联创为您的项目提供更专业的效果保证

  站长在发现搜索引擎蜘蛛抓取异常的情况下一定要记得去查看日志,找出其原因,要不然网站的收录和网站关键词排名就会出现异常了,那以上就是睿谷联创网络营销网站建设公司为大家分享的相关资讯,希望能够帮助到大家!

  随着“互联网+”时代的到来,全网营销已经变得非常重要,你是否也想让你的企业在网上发展更快更强大呢?那您身边的睿谷联创就是一家专致于企业营销型网站建设,营销型手机网站建设的公司,不断为传统企业打造网络快速赚钱机器,为不少企业赢得了抢占网络市场的先机。


tag: 网络营销 搜索引擎 蜘蛛抓取 网站收录