百度抓取診斷工具一直抓取失敗怎么辦？

近期某網站出現抓取一直失敗的問題，站長之家和愛站的抓取工具也是同樣的無法抓取。

愛站也是出現更新失敗的提示。

我們來看報錯信息：

返回HTTP頭：

HTTP/1.1 404 Not Found
x-frame-option: sameorigin
X-Frame-Options: SAMEORIGIN
Date: Tue, 13 Oct 2020 08:01:46 GMT
Connection: close
Content-Length: 1717

百度說咱們網站無法訪問，這還得了，直接發動不同城市的幾個哥們直接訪問網址，結果出人意料的是可以打開，順手再用ping工具試一下，結果全部“請求超時”，奇怪的詭異問題。

該網站當前情況：收錄已經降為0。

ok。不用說，也知道是百度那邊無法抓取到導致的，spider一直無法正常訪問網站（一直返回404），時間一久收錄自然會掉。但我們實際測試發現，網站訪問正常，究竟是什么原因導致的讓baiduspider無法訪問，但實際用戶可以正常打開網站呢？

無法訪問無非是兩個問題：1、域名問題；2、服務器問題；

既然實際用戶可以正常訪問（萬能的哥們已經測試過了），那域名解析問題就不存在了，只剩下一種可能：服務器。于是我們就可以拿同服務器ip上的站點來測試，檢測是否有類似情況出現。