您好,欢迎您登陆华人企业网络营销!

业务电话:010-85755626 13910736436

当前位置:首页 > 新闻中心 > 百度抓取异常的原因有哪些?

百度抓取异常的原因有哪些?

时间:2021-02-22 17:55:10 来源:华人企业网 作者:admin 点击: 114次

  百度抓取异常的原因有哪些?

  百度抓取异常的原原因主要分两大类,一是网站异常,二是链接异常。在哪里看呢,在百度搜索资源平台(https://ziyuan.baidu.com)你添加后数据统计—抓取异常那里,如下图。

  网站异常原因:

  1、dns异常

  当百度蜘蛛(Baiduspider)无法解析您网站的IP时,会出现DNS异常。可能是您的 网站IP地址错误 ,或者 域名服务商把Baiduspider封禁了 。

  可以用WHOIS或者host查询自己网站IP地址是否正确而且可以解析,如果不正确或无法解析,与域名注册商联系,更新网站IP地址。

  2、连接超时

  抓取请求连接超时,可能原因是: 服务器过载 或 网络不稳定。

  3、抓取超时

  抓取请求连接建立后,下载页面速度 过慢 ,导致超时。可能原因服务器过载, 带宽不足 。

  4、连接错误

  无法连接或者连接建立后对方服务器拒绝。

  链接异常原因:

  1、访问被拒绝

  爬虫发起抓取,httpcode返回码是403。

  2、找不到页面

  爬虫发起抓取,httpcode返回码是404。

  3、服务器错误

  爬虫发起抓取,httpcode返回码是5XX

  4、其他错误

  爬虫发起抓取,httpcode返回码是4XX,不包括403和404。

  转载请注明本文地址:http://www.mvidc.com/xwzx/2021022234674.html

上一篇:上一篇:抓取异常是什么?百度抓取异常又是什么?

下一篇:下一篇:网站抓取异常的原因有哪些?