借助百度抓取异常工具及时发现网站死链

百度站长平台的“抓取异常”工具近日进行了升级，我们可以通过升级后的抓取异常工具查看到百度在抓取网站时遇到的各种问题。例如连接错误、连接超时、抓取超时、DNS解析错误、找不到的页面。通过这些参数我们可以知道百度蜘蛛为什么无法访问网站，是哪方面出了错误。

文章源自堕落的鱼-https://www.duoluodeyu.com/1419.html

另外通过这个工具，我们还可以看到百度蜘蛛无法找到的页面。这些页面百度可能以前收录过，但由于后期的某些调整，造成这些页面地址改变或者不再存在，在百度访问时，服务器返回404友好错误代码。但一个网站如果存在大量的404错误页面，必将大大损伤网站的整体形象，再者搜索引擎蜘蛛是通过链接来爬行搜索，如果太多链接无法到达，不但收录页面数量会减少，而且网站在搜索引擎中的权重会大大降低。此时我们可以使用百度站长平台的“抓取异常工具”，收集近段时间内百度无法到达的链接地址并制作成死链文件，通过百度站长平台的“死链提交”工具提交站点死链，通知百度不要再来抓取这些页面了。文章源自堕落的鱼-https://www.duoluodeyu.com/1419.html

文章源自堕落的鱼-https://www.duoluodeyu.com/1419.html 文章源自堕落的鱼-https://www.duoluodeyu.com/1419.html