今天我們來講解一個(gè)小問題,很多朋友更新了robots.txt文件以后,然后去百度站長平臺監(jiān)測 robots.txt是否正確,卻被提示:百度暫時(shí)無法鏈接服務(wù)器,錯(cuò)誤301代碼,這個(gè)時(shí)候我們應(yīng)該怎么解 決那?其實(shí)解決方法并不是很難,今天就教大家排查這個(gè)問題。
1,服務(wù)器是否可以正常訪問!
我們最先檢查的應(yīng)該是我們的服務(wù)器,手動(dòng)訪問,看是否可以打開,或者是否打開非常慢,所造成 百度抓取延遲,才導(dǎo)致的抓取失敗,大家可以用17測,來檢測網(wǎng)站的整體速度,如果發(fā)現(xiàn)網(wǎng)站異常慢的 話,就應(yīng)該聯(lián)系你的服務(wù)商進(jìn)行排查問題了,問題排查后,恢復(fù)正常,大家在進(jìn)行檢測robots.txt,就 可以恢復(fù)正常了。
2,檢查域名是否為首選域,301導(dǎo)致的錯(cuò)誤!
如果服務(wù)器沒有問題,大家就檢查下是不是首選域的問題,比如你在站長平臺綁定的域名是你的頂級域名,而訪問網(wǎng)站卻是你的www域名,百度站長平臺訪問的時(shí)候,可能就會提示抓取錯(cuò)誤,如果是這個(gè)問題,建議重新綁定站長平臺域名來解決即可。
3,檢測robots.txt,是否在根目錄!
如果以上沒問題,請檢查你的robots.txt是否在網(wǎng)站根目,很多朋友都容易放錯(cuò),誤以為robots.txt放在那里都是可以的,其實(shí)這個(gè)文件是必須放到根目錄的,這個(gè)大家要注意。
4,檢查robots.txt是否為空
如果robots.txt文件位置沒有錯(cuò),我們就要檢查下robots.txt是否為空文件,可能再上傳或者直接修改時(shí),造成了文件的錯(cuò)誤而導(dǎo)致為空,這種情況,百度也會提示抓取失敗。
5,刷新CDN緩存/http錯(cuò)誤!
如果以上都沒有錯(cuò)誤,那么你就要檢查你的CDN了,很可能是因?yàn)镃DN緩存而造成的,或者是你配置了https,而站長平臺卻綁定的http,無法訪問,這兩點(diǎn)自己排查,如果以上都做到,那么是不會提示這類錯(cuò)誤的,當(dāng)然也不排查百度站長平臺本身的問題,不過這種機(jī)率性很小。
文章來源:代代SEO博客
來源地址:https://www.daidaiseo.com/seoti/410.html
申請創(chuàng)業(yè)報(bào)道,分享創(chuàng)業(yè)好點(diǎn)子。點(diǎn)擊此處,共同探討創(chuàng)業(yè)新機(jī)遇!