YouBot

基本資訊

YouBot的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲，可能存在資訊不明的情況。

使用者代理

關於YouBot蜘蛛或者爬蟲的使用者代理字串，IP地址和伺服器，所在地等資訊如下表格所示：

來源

訪問控制

瞭解如何控制YouBot訪問許可權，避免YouBot抓取行為不當。

一般不要攔截。搜尋引擎爬蟲為搜尋引擎提供動力，是使用者發現您網站的有效途徑。事實上，攔截搜尋引擎爬蟲可能會嚴重減少網站的自然流量。

您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 YouBot 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛，以檢查它是否真正遵循這些規則。

# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: YouBot
Disallow: /

您無需手動執行此操作，可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。

更多資訊

您好！YouBot 為搜尋引擎 https://www.you.com 抓取網頁並編制索引。雖然名為 YouBot，但在大街上我的名字是

Mozilla/5.0 (compatible; YouBot/1.0; +https://about.you.com/youbot/)

您也可以通過這些數字找到 YouBot，但這些數字將來可能會更改/增加：

20.59.40.22
52.226.199.170

一般情況下，YouBot 會遵守您網站 robots.txt 中的任何規定。如果您發現該蜘蛛行為不端或有任何其他一般問題，請傳送電子郵件至 hey@you.com。

基本資訊