Bad-Neighborhood

是否攔截Bad-Neighborhood？

可能不需要。工具型別爬蟲通常為網站所有者使用此類工具對網站進行相關服務請求才會出現。當然，實際情況需站長判斷後再作決定。

通過Robots.txt攔截

您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 Bad-Neighborhood 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛，以檢查它是否真正遵循這些規則。

# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: Bad-Neighborhood
Disallow: /

您無需手動執行此操作，可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。

header detector這個工具通過爬蟲Bad-Neighborhood將幫助你檢測一個特定的URL所產生的確切標題。在搜尋引擎優化中，這對於使用 “跳轉 “URL或重定向cgi來跟蹤點選列表的人數的目錄列表來說可能特別重要。很多時候，這些程式會產生一個302 Found頭的響應，用來表示一個臨時重定向。眾所周知，這在過去會給某些搜尋引擎帶來問題，並可能導致 “頁面劫持”。如果有問題的指令碼返回一個正確的301永久移動響應，這個問題就不會發生。

常見的返回程式碼:

這是最常見的返回狀態程式碼的列表。關於詳細的列表和進一步的解釋，請訪問W3.org HTTP/1.1: Status Code Definitions

300’s重定向

• 301 永久移動 (永久重定向)
• 302 發現（臨時重定向）
• 304 Not Modified（只應在響應有條件的GET時返回）

400’s客戶端錯誤

• 400錯誤請求（畸形的URI）
• 401 未授權 (HTTP授權失敗)
• 403 禁止 (你沒有許可權檢視)
• 404 未找到（該資源不存在）
• 410 消失（該資源已不可用）

500’s伺服器錯誤

• 500內部伺服器錯誤（意外的伺服器錯誤）
• 501 未執行（伺服器不識別請求方法）
• 503 服務不可用 (伺服器太忙)