四大原因會造成百度蜘蛛抓取異常 二維碼
497
發(fā)表時間:2016-12-08 10:54 我們有時候給網(wǎng)站做優(yōu)化推廣的時候都會碰到蜘蛛抓取異常的情況出現(xiàn),但是導(dǎo)致這樣情況出現(xiàn)的原因我們卻難以發(fā)現(xiàn)。西安網(wǎng)絡(luò)公司就來給大家逐一分析下。 **、DNS異常 當百度蜘蛛無法解析你網(wǎng)站的IP時,會出現(xiàn)DNS異常??赡苁悄木W(wǎng)站IP地址錯誤,或者域名服務(wù)商把百度蜘蛛封禁。請使用WHOIS或者host查詢自己網(wǎng)站IP地址是否正確且可解析,如果不正確或無法解析,請與域名注冊商聯(lián)系,更新您的IP地址。 第二、IP封禁 IP封禁為:限制網(wǎng)絡(luò)的出口IP地址,禁止該IP段的使用者進行內(nèi)容訪問,在這里特指封禁了百度蜘蛛 IP。當網(wǎng)站不希望百度蜘蛛訪問時,才需要該設(shè)置,如果希望百度蜘蛛訪問你的網(wǎng)站,請檢查相關(guān)設(shè)置中是否誤添加了百度蜘蛛 IP。也有可能是你網(wǎng)站所在的空間服務(wù)商把百度IP進行了封禁,這時你需要聯(lián)系服務(wù)商更改設(shè)置。 第三、服務(wù)器連接異常 服務(wù)器連接異常會有兩種情況:一種是站點不穩(wěn)定,百度蜘蛛嘗試連接您網(wǎng)站的服務(wù)器時出現(xiàn)暫時無法連接的情況;一種是百度蜘蛛一直無法連接上您網(wǎng)站的服務(wù)器。也有可能是您的網(wǎng)站運行不正常,請檢查網(wǎng)站的web服務(wù)器(如apache、iis)是否安裝且正常運行,并使用瀏覽器檢查主要頁面能否正常訪問。您的網(wǎng)站和主機還可能阻止了百度蜘蛛的訪問,您需要檢查網(wǎng)站和主機的防火墻。 第四、網(wǎng)站存在死鏈 頁面已經(jīng)無效,無法對用戶提供任何有價值信息的頁面就是死鏈接,包括協(xié)議死鏈和內(nèi)容死鏈兩種形式: 協(xié)議死鏈:頁面的TCP協(xié)議狀態(tài)/HTTP協(xié)議狀態(tài)明確表示的死鏈,常見的如404、403、503狀態(tài)等。 內(nèi)容死鏈:服務(wù)器返回狀態(tài)是正常的,但內(nèi)容已經(jīng)變更為不存在、已刪除或需要權(quán)限等與原內(nèi)容無關(guān)的信息頁面。 網(wǎng)站抓取出現(xiàn)異常這對網(wǎng)站本身也是不好的,所以我們在平時檢查工作中一定要仔細檢查好每個細節(jié)。要是您對此有什么疑問,歡迎跟我們咨詢。 西安網(wǎng)絡(luò)公司非常希望大家共同學習交流,和各位經(jīng)驗豐富的站長大神們共同進步共同創(chuàng)造SEO的廣闊天地,期待與您的合作。 |