webprosbot

基本資訊

webprosbot的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲，可能存在資訊不明的情況。

使用者代理

關於webprosbot蜘蛛或者爬蟲的使用者代理字串，IP地址和伺服器，所在地等資訊如下表格所示：

來源

IP地址(411)	伺服器名稱	所屬國家
52.211.71.104	ec2-52-211-71-104.eu-west-1.compute.amazonaws.com	IE
3.250.237.106	ec2-3-250-237-106.eu-west-1.compute.amazonaws.com	IE
54.170.200.243	ec2-54-170-200-243.eu-west-1.compute.amazonaws.com	IE
54.76.19.158	ec2-54-76-19-158.eu-west-1.compute.amazonaws.com	IE
34.252.19.244	ec2-34-252-19-244.eu-west-1.compute.amazonaws.com	IE

來源

IP地址(10)	伺服器名稱	所屬國家
44.242.166.72	ec2-44-242-166-72.us-west-2.compute.amazonaws.com	US
18.116.89.160	ec2-18-116-89-160.us-east-2.compute.amazonaws.com	US
3.86.158.198	ec2-3-86-158-198.compute-1.amazonaws.com	US
18.168.226.69	ec2-18-168-226-69.eu-west-2.compute.amazonaws.com	US
13.51.109.146	ec2-13-51-109-146.eu-north-1.compute.amazonaws.com	US

訪問控制

瞭解如何控制webprosbot訪問許可權，避免webprosbot抓取行為不當。

對於未知蜘蛛或者爬蟲。它的用途對網站來說可能是好的，也可能是壞的，這取決於它是什麼。所以說，這需要站長進一步分析判斷這些尚不明確的爬蟲行為，再作最終決定。但，根據以往的經驗，未宣告行為目的及未命名的蜘蛛爬蟲，通常都有不可告人的祕密，我們理應對其行為進行控制，比如攔截。

您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 webprosbot 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛，以檢查它是否真正遵循這些規則。

# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: webprosbot
Disallow: /

您無需手動執行此操作，可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。

基本資訊