真是醉了,度娘的robots.txt驗證就沒有準(zhǔn)過。檢查并更新的時候，一直提示有問題。但事實上網(wǎng)站一切都正常。并沒有出現(xiàn)500的返回錯誤。這是什么原因呢？

第一次請求顯示：百度暫時無法連接您的服務(wù)器，請檢查服務(wù)器的設(shè)置，確保您網(wǎng)站的服務(wù)器能被正常訪問。錯誤碼：500

第二次顯示：請求失敗，我們已記錄此問題并將盡快處理，請刷新頁面或稍后再試。

網(wǎng)站打開也是沒有任何問題。于是有點懷疑，是不是被植入木馬了，只有搜索引擎進入網(wǎng)站才會出現(xiàn)500錯誤，于是我們繼續(xù)做實驗，用站長平臺的工具，模擬訪問網(wǎng)站，結(jié)果是：一切正常，而且服務(wù)器殺毒軟件之類的也沒有進行攔截（站長平臺訪問的時候也沒有攔截）

那好，如果還沒有問題，我們再通過日志來驗證一下，站長資源平臺請求的時候，是否真的有訪問，打開網(wǎng)站的訪問日志看一下吧：

日志里確實沒有訪問記錄，更別提500出錯了。

于是，就再聯(lián)想一下：莫非是機房防火墻攔截你了？我們看一下模擬抓取的結(jié)果吧！

再去看看，訪問日志里，有沒有問題呢？

完全沒有問題，只有這一條關(guān)于robots.txt的訪問記錄。

那么，現(xiàn)在野狼SEO團隊就可以揭曉問題的答案了，很明顯是：站長資源平臺上的Robots有問題，是故障的。做了進一步的檢驗，發(fā)現(xiàn)只要是HTTPS的網(wǎng)站，robots功能就異常，http的網(wǎng)站功能是正常的。

感謝大家的支持，這就是一次故障的檢查過程，如果您有網(wǎng)站SEO問題，也歡迎找我們幫您找原因。