百度蜘蛛抓取異常的原因有哪些 二維碼
139
發(fā)表時(shí)間:2017-09-06 15:30 我們有時(shí)候給網(wǎng)站做優(yōu)化推廣的時(shí)候都會(huì)碰到蜘蛛抓取異常的情況出現(xiàn),但是導(dǎo)致這樣情況出現(xiàn)的原因我們卻難以發(fā)現(xiàn)。西安網(wǎng)絡(luò)公司就來(lái)給大家逐一分析下。 **、DNS異常 當(dāng)百度蜘蛛無(wú)法解析你網(wǎng)站的IP時(shí),會(huì)出現(xiàn)DNS異常??赡苁悄木W(wǎng)站IP地址錯(cuò)誤,或者域名服務(wù)商把百度蜘蛛封禁。請(qǐng)使用WHOIS或者h(yuǎn)ost查詢自己網(wǎng)站IP地址是否正確且可解析,如果不正確或無(wú)法解析,請(qǐng)與域名注冊(cè)商聯(lián)系,更新您的IP地址。 第二、IP封禁 IP封禁為:限制網(wǎng)絡(luò)的出口IP地址,禁止該IP段的使用者進(jìn)行內(nèi)容訪問(wèn),在這里特指封禁了百度蜘蛛 IP。當(dāng)網(wǎng)站不希望百度蜘蛛訪問(wèn)時(shí),才需要該設(shè)置,如果希望百度蜘蛛訪問(wèn)你的網(wǎng)站,請(qǐng)檢查相關(guān)設(shè)置中是否誤添加了百度蜘蛛 IP。也有可能是你網(wǎng)站所在的空間服務(wù)商把百度IP進(jìn)行了封禁,這時(shí)你需要聯(lián)系服務(wù)商更改設(shè)置。 第三、服務(wù)器連接異常 服務(wù)器連接異常會(huì)有兩種情況:一種是站點(diǎn)不穩(wěn)定,百度蜘蛛嘗試連接您網(wǎng)站的服務(wù)器時(shí)出現(xiàn)暫時(shí)無(wú)法連接的情況;一種是百度蜘蛛一直無(wú)法連接上您網(wǎng)站的服務(wù)器。也有可能是您的網(wǎng)站運(yùn)行不正常,請(qǐng)檢查網(wǎng)站的web服務(wù)器(如apache、iis)是否安裝且正常運(yùn)行,并使用瀏覽器檢查主要頁(yè)面能否正常訪問(wèn)。您的網(wǎng)站和主機(jī)還可能阻止了百度蜘蛛的訪問(wèn),您需要檢查網(wǎng)站和主機(jī)的防火墻。 第四、網(wǎng)站存在死鏈 頁(yè)面已經(jīng)無(wú)效,無(wú)法對(duì)用戶提供任何有價(jià)值信息的頁(yè)面就是死鏈接,包括協(xié)議死鏈和內(nèi)容死鏈兩種形式: 協(xié)議死鏈:頁(yè)面的TCP協(xié)議狀態(tài)/HTTP協(xié)議狀態(tài)明確表示的死鏈,常見(jiàn)的如404、403、503狀態(tài)等。 內(nèi)容死鏈:服務(wù)器返回狀態(tài)是正常的,但內(nèi)容已經(jīng)變更為不存在、已刪除或需要權(quán)限等與原內(nèi)容無(wú)關(guān)的信息頁(yè)面。 網(wǎng)站抓取出現(xiàn)異常這對(duì)網(wǎng)站本身也是不好的,所以我們?cè)谄綍r(shí)檢查工作中一定要仔細(xì)檢查好每個(gè)細(xì)節(jié)。要是您對(duì)此有什么疑問(wèn),歡迎跟我們咨詢。 西安網(wǎng)絡(luò)公司非常希望大家共同學(xué)習(xí)交流,和各位經(jīng)驗(yàn)豐富的站長(zhǎng)大神們共同進(jìn)步共同創(chuàng)造SEO的廣闊天地。西安信之上期待與您的合作。 |