用戶可以正常訪問(wèn)一些內(nèi)容質(zhì)量高的網(wǎng)頁(yè)，但百度pider無(wú)法正常訪問(wèn)和抓取，導(dǎo)致搜索結(jié)果覆蓋率不足，給百度搜索引擎和網(wǎng)站帶來(lái)?yè)p失。百度稱這種情況為“搶占例外”。

百度搜索引擎會(huì)考慮大量?jī)?nèi)容無(wú)法正常獲取的網(wǎng)站在用戶體驗(yàn)上的缺陷，減少對(duì)網(wǎng)站的評(píng)價(jià)。在抓取、索引和排名方面，百度搜索引擎會(huì)受到一定程度的負(fù)面影響，最終影響百度網(wǎng)站獲得的流量。

以下描述了站長(zhǎng)異常抓取的一些常見(jiàn)原因：

服務(wù)器連接異常有兩種情況:(1)網(wǎng)站不穩(wěn)定，百度spider暫時(shí)無(wú)法連接到您網(wǎng)站的服務(wù)器；(2)百度spider無(wú)法連接到您網(wǎng)站的服務(wù)器。

1、服務(wù)器連接異常的原因通常是您的網(wǎng)站服務(wù)器太大和過(guò)載。您的網(wǎng)站也可能運(yùn)行異常。請(qǐng)檢查網(wǎng)站web服務(wù)器（如Apache、IIS）使用瀏覽器檢查主頁(yè)是否使用瀏覽器檢查主頁(yè)是否可以正常訪問(wèn)。您的網(wǎng)站和主機(jī)也可能被阻止Baiduspider訪問(wèn)。您需要檢查網(wǎng)站和主機(jī)的防火墻。

2、網(wǎng)絡(luò)運(yùn)營(yíng)商例外：網(wǎng)絡(luò)運(yùn)營(yíng)商分為電信和聯(lián)通兩類。spider無(wú)法通過(guò)電信或網(wǎng)絡(luò)訪問(wèn)您的網(wǎng)站。如果發(fā)生這種情況，您需要聯(lián)系網(wǎng)絡(luò)服務(wù)提供商，或購(gòu)買空間和二線服務(wù)或CDN服務(wù)。

3、DNS異常：當(dāng)Baiduspider無(wú)法分析你的網(wǎng)站IP會(huì)出現(xiàn)地址DNS異常?？赡苁悄憔W(wǎng)站的。IP地址錯(cuò)誤，或域名服務(wù)提供商已被禁止Baiduspider。請(qǐng)使用whois或host檢查你的網(wǎng)站IP地址是否正確且可分析。如果沒(méi)有，請(qǐng)聯(lián)系域名注冊(cè)商更新您的信息IP地址。

4、IP阻塞：IP阻塞限制了網(wǎng)絡(luò)的導(dǎo)出IP禁止地址IP段用戶訪問(wèn)內(nèi)容。這里具體指百度piderip屏蔽。這個(gè)設(shè)置只在你的網(wǎng)站上，不希望百度pider只需要訪問(wèn)。如果你想讓百度pider訪問(wèn)您的網(wǎng)站，請(qǐng)檢查百度spiderIP是否錯(cuò)誤地添加到相關(guān)設(shè)置中。您的網(wǎng)站所在的空間服務(wù)提供商也可能禁止百度IP。此時(shí)，您需要聯(lián)系服務(wù)提供商以更改設(shè)置。

5、UA阻塞：UA是用戶代理。服務(wù)器通過(guò)UA識(shí)別訪問(wèn)者的身份。當(dāng)網(wǎng)站訪問(wèn)指定的UA并返回一個(gè)異常頁(yè)面(如403500)或跳轉(zhuǎn)到另一個(gè)頁(yè)面，稱為UA阻塞。這個(gè)設(shè)置只是你不想要的Baiduspider只有在訪問(wèn)您的網(wǎng)站時(shí)才需要它。若要百度訪問(wèn)您的網(wǎng)站，是否有百度在用戶代理相關(guān)設(shè)置中及時(shí)修改。

百度蜘蛛抓異常問(wèn)題

6、死鏈：頁(yè)面無(wú)效，無(wú)法向用戶提供任何有價(jià)值信息的頁(yè)面為死鏈，包括協(xié)議死鏈和內(nèi)容死鏈。

協(xié)議死鏈：頁(yè)面TCP協(xié)議狀態(tài)/HTTP協(xié)議狀態(tài)明確表示死鏈，如404、403、503等。

內(nèi)容鏈：服務(wù)器返回狀態(tài)正常，但內(nèi)容已更改為不存在、刪除或需要權(quán)限的信息頁(yè)面，與原始內(nèi)容無(wú)關(guān)。

對(duì)于死鏈，我們建議網(wǎng)站使用協(xié)議死鏈，通過(guò)百度網(wǎng)站管理員平臺(tái)死鏈工具提交給百度，使百度能夠更快地找到死鏈，減少死鏈對(duì)用戶和搜索引擎的負(fù)面影響。

7、異常跳轉(zhuǎn)：跳轉(zhuǎn)是將網(wǎng)絡(luò)請(qǐng)求重新定位到另一個(gè)位置。異常跳轉(zhuǎn)是指以下情況：

1）當(dāng)前頁(yè)面為無(wú)效頁(yè)面（內(nèi)容已刪除、死鏈等），直接跳轉(zhuǎn)到上一個(gè)目錄或主頁(yè)，百度建議站長(zhǎng)刪除無(wú)效頁(yè)面入口超鏈接

注：如果長(zhǎng)時(shí)間跳轉(zhuǎn)到其他域名，如果域名在網(wǎng)站上更改，百度建議設(shè)置301跳轉(zhuǎn)協(xié)議。

其他網(wǎng)站異常原因：

1）百度推薦人的例外情況：網(wǎng)頁(yè)返回不同于百度推薦人的正常內(nèi)容。

2）對(duì)于百度UA例外：返回百度UA網(wǎng)頁(yè)行為不同于頁(yè)面的原始內(nèi)容。

3）JS跳轉(zhuǎn)異常：網(wǎng)頁(yè)加載了百度無(wú)法識(shí)別的JS用戶通過(guò)搜索結(jié)果進(jìn)入網(wǎng)頁(yè)后跳轉(zhuǎn)代碼。

4）壓力過(guò)大造成的事故障礙：百度將根據(jù)網(wǎng)站規(guī)模、訪問(wèn)量等信息自動(dòng)設(shè)置合理的壓力。但在壓力控制異常等異常情況下，服務(wù)器將根據(jù)自己的負(fù)載保護(hù)事故鎖。在這種情況下，請(qǐng)?jiān)诜祷卮a中返回503（即不可用的服務(wù)），以便百度spider試著在一段時(shí)間內(nèi)再次獲取鏈接。若該網(wǎng)站處于空閑狀態(tài)，則將成功獲取該網(wǎng)站。