1、什么是抓取诊断工具
抓取诊断工具，可以让站长从百度蜘蛛的视角查看抓取内容，自助诊断百度蜘蛛看到的内容，和预期是否一致。
每个站点每月可使用300次，抓取结果只展现百度蜘蛛可见的前200KB内容。
2、抓取诊断工具能做什么
1）诊断抓取内容是否符合预期，譬如很多商品详情页面，价格信息是通过JavaScript输出的，对百度蜘蛛不友好，价格信息较难在搜索中应用。问题修正后，可用诊断工具再次抓取检验。
image001.png
2）诊断网页是否被加了黒链、隐藏文本。网站如果被黑，可能被加上隐藏的链接，这些链可能只在百度抓取时才出现，需要用此抓取工具诊断。
3）检查网站与百度的连接是否畅通，若是IP信息不一致，可以报错通知百度更新IP。
image003.png
4）如果网站有新页面或页面内容有更新，百度蜘蛛较长时间没来访问，可以通过此工具邀请它快速来抓取。
来源：百度搜索资源平台
## 一、安装使用 1.将智能小程序页面校验工具下载下来，以好路网的demo为例，登录[baidu.com](https://www.baidu.com/)注册页面，输入安装命令，下载小程序页面校验工具 ``` $ cd /usr/local/bin $ wget https://github.com/cqr666/check_pages ``` 2.然后进入check_pages文件夹
亲爱的网站管理员：收到很多站长吐槽表示看不明白链接提交工具的示意图，进行case分析后我们发现，原示意图的确很容易令管理员产生误会。于是单独对示意图进行了升级。升级后的示意图蓝色的抓取链接发生变化，指：之前提交链接在当天首次抓取的数量，注意和之前对比加了一个首次哦。红色的提交链接不变，依然是站点当天提交的之前未提交过的链接数量。这样就不会发生红线一直是0，但蓝线还有值的情况了。由于抓取链接数据（蓝
百度搜索资源平台采用HTTPS（安全套接字层/传输层安全）来保障用户通过网络与百度搜索资源平台服务器的传输安全性。HTTPS认证的安全性包括对传输过程中数据的加密，以及借助数字证书或SSL证书来识别用户的身份信息。通过这种双重保护，百度搜索资源平台保证服务器的安全性，不会被黑客攻击。
【url规范】百度支持抓取的url长度不超过1024，如果您的链接长度过长，请在保证正常访问的情况下，适当精简，保证链接能被百度正常抓取和收录。【重定向错误】重定向是指百度spider访问链接时发生了跳转，如果跳转后的链接超长或者连续跳转的次数超过5次，就会发生重定向错误而导致抓取失败。【服务器连接错误】这种情况是指，由于服务器响应过慢或您的网站屏蔽了百度spider，而导致百度无法访问您的网站。
