Categories


Tags


抓取异常的原因有哪些

一、网站异常

1、dns异常

当Baiduspider无法解析您网站的IP时,会出现DNS异常。可能是您的网站IP地址错误,或者域名服务商把Baiduspider封禁。请使用WHOIS或者host查询自己网站IP地址是否正确且可解析,如果不正确或无法解析,请与域名注册商联系,更新您的IP地址。

2、连接超时

抓取请求连接超时,可能原因服务器过载,网络不稳定

3、抓取超时

抓取请求连接建立后,下载页面速度过慢,导致超时,可能原因服务器过载,带宽不足

4、连接错误

无法连接或者连接建立后对方服务器拒绝

二、链接异常

1、访问被拒绝

爬虫发起抓取,httpcode返回码是403

2、找不到页面

爬虫发起抓取,httpcode返回码是404

3、服务器错误

爬虫发起抓取,httpcode返回码是5XX

4、其他错误

爬虫发起抓取,httpcode返回码是4XX,不包括403和404

来源:百度搜索资源平台 百度搜索学堂


Public @ 2018-09-22 16:02:23

百度搜索资源平台-小程序资源数据统计上线公告

搜索资源平台小程序资源收录&点展数据已于今日(3.22)完成上线。您可通过该功能查看您的熊掌ID所绑定的小程序资源在搜索中的收录和点展情况。1. 数据统计-收录统计如下图,您可在数据统计-收录统计中查看小程序收录资源量,以及在当前熊掌ID下小程序资源量占比。如下图,您可查看当前熊掌ID下所绑定所有小程序资源7日内和30日内的收录趋势。2.    数据统计-点展统计如下图

Public @ 2012-02-25 16:05:26

百度站长平台升级为搜索资源平台 并推新阿拉丁开放生态

百度于近日宣布将其站长平台升级为搜索资源平台,并推出全新的阿拉丁开放生态系统。 百度站长平台是一个向网站站长提供服务的平台,旨在帮助他们优化网站,提升在百度搜索中的排名和展示效果。通过站长平台,网站管理员可以提交网站地图、监控网站的健康状况、查看网站的搜索排名和流量等等。 而升级为搜索资源平台后,百度将更加关注网站的内容和资源,而不仅仅是网站的优化和排名。这意味着,站长不仅可以通过平台提交网站

Public @ 2023-07-25 06:50:21

站长反馈中心5月6日-5月12日问题反馈

作者:百度站长平台       发布时间:2013年5月17日为了更好处理用户提交反馈的问题,百度站长平台站长反馈中心全新改版,包含网页搜索、百度站长平台及百度分享三类产品的问题的反馈地址,并在这三类产品问题反馈页面增加了问题的分类和说明,辅助您更好的判断问题,快速方便的完成反馈。5月6日-5月12日一周共收到3100例站长投诉,其中网页搜索相关问题占比92

Public @ 2014-01-02 16:08:04

百度搜索资源平台-死链提交工具升级公告

尊敬的用户: 您好!感谢您一直以来对百度搜索资源平台的支持和信任。为了提高我们的服务质量,我们将于近期升级百度搜索资源平台的死链提交工具。具体升级内容如下: 1. 升级后的死链提交工具将支持多个链接的提交,帮助用户更快速、更便捷地提交死链信息。 2. 升级后的死链提交工具将支持PC端和移动端的链接提交,满足用户的不同需求。 3. 升级后的死链提交工具将支持一键识别死链功能,用户无需手动检查

Public @ 2023-04-25 22:00:18

更多您感兴趣的搜索

0.588220s