AntBot

AntBot蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解AntBot基本資訊，使用者代理和訪問控制等。

基本資訊

AntBot的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲，可能存在資訊不明的情況。

蜘蛛/爬蟲名稱: AntBot

型別: 爬蟲

開發商: Unknown Author

當前狀態: 活動

使用者代理

關於AntBot蜘蛛或者爬蟲的使用者代理字串，IP地址和伺服器，所在地等資訊如下表格所示：

使用者代理字串: AntBot

首次出現: 2023-10-17 22:51:36

最後出現: 2023-11-05 16:00:56

遵循robots.txt: 未知

來源

IP地址(480)	伺服器名稱	所屬國家
83.149.125.220	hosted-by.leaseweb.com	NL
69.55.58.107	69.55.58.107	US
69.55.58.103	69.55.58.103	US
69.55.58.105	69.55.58.105	US
69.55.58.104	69.55.58.104	US
69.55.58.101	69.55.58.101	US
69.55.58.108	69.55.58.108	US
69.55.58.102	69.55.58.102	US
69.55.58.106	69.55.58.106	US
3.236.241.156	ec2-3-236-241-156.compute-1.amazonaws.com	US
44.210.96.37	ec2-44-210-96-37.compute-1.amazonaws.com	US
3.230.143.204	ec2-3-230-143-204.compute-1.amazonaws.com	US
44.211.142.236	ec2-44-211-142-236.compute-1.amazonaws.com	US
3.237.10.148	ec2-3-237-10-148.compute-1.amazonaws.com	US
54.226.216.239	ec2-54-226-216-239.compute-1.amazonaws.com	US
44.201.166.154	ec2-44-201-166-154.compute-1.amazonaws.com	US
35.172.111.89	ec2-35-172-111-89.compute-1.amazonaws.com	US
34.236.33.165	ec2-34-236-33-165.compute-1.amazonaws.com	US
3.236.56.68	ec2-3-236-56-68.compute-1.amazonaws.com	US
34.229.64.75	ec2-34-229-64-75.compute-1.amazonaws.com	US
3.95.154.199	ec2-3-95-154-199.compute-1.amazonaws.com	US
54.82.249.233	ec2-54-82-249-233.compute-1.amazonaws.com	US
54.81.75.15	ec2-54-81-75-15.compute-1.amazonaws.com	US
52.201.236.159	ec2-52-201-236-159.compute-1.amazonaws.com	US
35.168.114.169	ec2-35-168-114-169.compute-1.amazonaws.com	US
3.91.21.200	ec2-3-91-21-200.compute-1.amazonaws.com	US
34.235.115.194	ec2-34-235-115-194.compute-1.amazonaws.com	US
3.81.62.107	ec2-3-81-62-107.compute-1.amazonaws.com	US
44.197.112.254	ec2-44-197-112-254.compute-1.amazonaws.com	US
3.83.237.0	ec2-3-83-237-0.compute-1.amazonaws.com	US
18.212.117.181	ec2-18-212-117-181.compute-1.amazonaws.com	US
44.203.116.147	ec2-44-203-116-147.compute-1.amazonaws.com	?
44.206.239.10	ec2-44-206-239-10.compute-1.amazonaws.com	?
3.83.82.81	ec2-3-83-82-81.compute-1.amazonaws.com	US
52.87.239.182	ec2-52-87-239-182.compute-1.amazonaws.com	US
44.213.62.57	ec2-44-213-62-57.compute-1.amazonaws.com	US
44.197.102.111	ec2-44-197-102-111.compute-1.amazonaws.com	US
3.92.180.13	ec2-3-92-180-13.compute-1.amazonaws.com	US
35.174.11.153	ec2-35-174-11-153.compute-1.amazonaws.com	US
3.81.96.12	ec2-3-81-96-12.compute-1.amazonaws.com	US
3.91.196.42	ec2-3-91-196-42.compute-1.amazonaws.com	?
3.87.44.188	ec2-3-87-44-188.compute-1.amazonaws.com	US
3.233.217.94	ec2-3-233-217-94.compute-1.amazonaws.com	US
107.23.194.132	ec2-107-23-194-132.compute-1.amazonaws.com	US
34.234.78.97	ec2-34-234-78-97.compute-1.amazonaws.com	US
3.85.104.67	ec2-3-85-104-67.compute-1.amazonaws.com	?
54.224.120.73	ec2-54-224-120-73.compute-1.amazonaws.com	?
107.22.155.241	ec2-107-22-155-241.compute-1.amazonaws.com	US
54.163.137.23	ec2-54-163-137-23.compute-1.amazonaws.com	US
54.211.139.61	ec2-54-211-139-61.compute-1.amazonaws.com	US
3.238.29.200	ec2-3-238-29-200.compute-1.amazonaws.com	US
3.80.184.85	ec2-3-80-184-85.compute-1.amazonaws.com	US
54.204.120.178	ec2-54-204-120-178.compute-1.amazonaws.com	US
3.87.247.60	ec2-3-87-247-60.compute-1.amazonaws.com	US
44.208.20.3	ec2-44-208-20-3.compute-1.amazonaws.com	?
100.26.190.217	ec2-100-26-190-217.compute-1.amazonaws.com	US
34.238.255.62	ec2-34-238-255-62.compute-1.amazonaws.com	US
18.234.228.206	ec2-18-234-228-206.compute-1.amazonaws.com	US
54.81.249.95	ec2-54-81-249-95.compute-1.amazonaws.com	US
3.80.58.108	ec2-3-80-58-108.compute-1.amazonaws.com	?
54.145.172.18	ec2-54-145-172-18.compute-1.amazonaws.com	US
67.202.23.27	ec2-67-202-23-27.compute-1.amazonaws.com	US
3.89.233.73	ec2-3-89-233-73.compute-1.amazonaws.com	US
3.85.130.4	ec2-3-85-130-4.compute-1.amazonaws.com	US
3.95.188.12	ec2-3-95-188-12.compute-1.amazonaws.com	US
54.91.200.68	ec2-54-91-200-68.compute-1.amazonaws.com	US
44.211.153.152	ec2-44-211-153-152.compute-1.amazonaws.com	US
3.88.163.53	ec2-3-88-163-53.compute-1.amazonaws.com	US
174.129.155.193	ec2-174-129-155-193.compute-1.amazonaws.com	US
54.167.66.239	ec2-54-167-66-239.compute-1.amazonaws.com	US
3.235.173.56	ec2-3-235-173-56.compute-1.amazonaws.com	US
54.242.37.106	ec2-54-242-37-106.compute-1.amazonaws.com	US
52.90.63.240	ec2-52-90-63-240.compute-1.amazonaws.com	US
100.26.106.246	ec2-100-26-106-246.compute-1.amazonaws.com	US
52.23.228.69	ec2-52-23-228-69.compute-1.amazonaws.com	US
184.72.180.14	ec2-184-72-180-14.compute-1.amazonaws.com	US
52.207.186.241	ec2-52-207-186-241.compute-1.amazonaws.com	US
34.201.103.195	ec2-34-201-103-195.compute-1.amazonaws.com	US
54.208.216.106	ec2-54-208-216-106.compute-1.amazonaws.com	US
52.200.200.199	ec2-52-200-200-199.compute-1.amazonaws.com	US
23.20.139.230	ec2-23-20-139-230.compute-1.amazonaws.com	US
44.203.254.242	ec2-44-203-254-242.compute-1.amazonaws.com	US
44.201.160.6	ec2-44-201-160-6.compute-1.amazonaws.com	US
54.242.84.115	ec2-54-242-84-115.compute-1.amazonaws.com	US
18.206.156.156	ec2-18-206-156-156.compute-1.amazonaws.com	US
3.237.16.122	ec2-3-237-16-122.compute-1.amazonaws.com	US
54.234.140.206	ec2-54-234-140-206.compute-1.amazonaws.com	US
35.172.121.253	ec2-35-172-121-253.compute-1.amazonaws.com	US
18.215.245.47	ec2-18-215-245-47.compute-1.amazonaws.com	US
54.145.174.149	ec2-54-145-174-149.compute-1.amazonaws.com	US
34.228.25.58	ec2-34-228-25-58.compute-1.amazonaws.com	US

使用者代理字串: Ant.com beta/1.0 (Crawling antmarks; https://www.ant.com; admin@ant.com)

首次出現: 2018-10-21 07:03:24

最後出現: 2023-02-01 22:01:14

遵循robots.txt: 否

來源

IP地址(1)	伺服器名稱	所屬國家
185.120.68.164	185.120.68.164	CZ

使用者代理字串: Ant.com/1.0 (Crawling antmarks; https://www.ant.com; admin@ant.com)

首次出現: 2017-11-07 05:14:50

最後出現: 2017-11-07 05:14:50

遵循robots.txt: 未知

來源

IP地址(1)	伺服器名稱	所屬國家
185.120.68.164	185.120.68.164	CZ

使用者代理字串: Mozilla/5.0 (compatible; AntBot/1.0; +http://www.ant.com/)

首次出現: 2010-11-10 22:08:59

最後出現: 2011-01-06 16:26:50

遵循robots.txt: 未知

來源

IP地址(6)	伺服器名稱	所屬國家
83.149.125.220	hosted-by.leaseweb.com	NL
69.55.58.102	69.55.58.102	US
69.55.58.103	69.55.58.103	US
69.55.58.105	69.55.58.105	US
69.55.58.106	69.55.58.106	US
69.55.58.107	69.55.58.107	US
69.55.58.108	69.55.58.108	US

使用者代理字串: Mozilla/5.0 (compatible; AntBot/1.0; +http://www.ant.com/)

首次出現: 2010-11-10 22:08:59

最後出現: 2011-01-06 16:26:50

遵循robots.txt: 未知

來源

IP地址(6)	伺服器名稱	所屬國家
69.55.58.106	69.55.58.106	US
69.55.58.107	69.55.58.107	US
69.55.58.108	69.55.58.108	US
69.55.58.102	69.55.58.102	US
69.55.58.103	69.55.58.103	US
69.55.58.105	69.55.58.105	US

使用者代理字串: AntBot/Ant-Nutch-1.1 (Ant Nutch Crawler; http://www.ant.com; crawler@ant.com)

首次出現: 2010-09-28 13:27:27

最後出現: 2010-09-29 14:04:45

遵循robots.txt: 未知

來源

IP地址(3)	伺服器名稱	所屬國家
69.55.58.103	69.55.58.103	US
69.55.58.105	69.55.58.105	US
69.55.58.107	69.55.58.107	US

使用者代理字串: Ant/Ant-Nutch-1.1 (Ant Nutch Crawler; http://www.ant.com; crawler@ant.com)

首次出現: 2010-08-03 02:52:04

最後出現: 2010-09-16 07:38:02

遵循robots.txt: 未知

來源

IP地址(8)	伺服器名稱	所屬國家
69.55.58.104	69.55.58.104	US
69.55.58.105	69.55.58.105	US
69.55.58.106	69.55.58.106	US
69.55.58.107	69.55.58.107	US
69.55.58.108	69.55.58.108	US
69.55.58.101	69.55.58.101	US
69.55.58.102	69.55.58.102	US
69.55.58.103	69.55.58.103	US

訪問控制

瞭解如何控制AntBot訪問許可權，避免AntBot抓取行為不當。

是否攔截AntBot？

可以考慮攔截。。爬蟲通常會下載公開的網際網路內容，這些內容預設情況下可以免費訪問。不過，如果你不希望你的內容被用於未經授權的目的，你應該攔截它們。

通過Robots.txt攔截

您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 AntBot 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛，以檢查它是否真正遵循這些規則。

# robots.txt

# 下列程式碼一般情況可以攔截該代理

User-agent: AntBot

Disallow: /

# robots.txt # 下列程式碼一般情況可以攔截該代理 User-agent: AntBot Disallow: /

# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: AntBot
Disallow: /

您無需手動執行此操作，可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。

站長工具

我們為站長量身定做的高效工具集。

檢視全部工具

常見蜘蛛/爬蟲

Common Spiders

Crawler-IP-Fetcher

Crawler-IP-Fetcher蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解Crawler-IP-Fetcher基本資訊，使用者代理和訪問控制等。

DARPResearchBot

DARPResearchBot蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解DARPResearchBot基本資訊，使用者代理和訪問控制等。

xfa1

xfa1蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解xfa1基本資訊，使用者代理和訪問控制等。

MassScanner

MassScanner蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解MassScanner基本資訊，使用者代理和訪問控制等。

robots-bulk-crawler

robots-bulk-crawler蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解robots-bulk-crawler基本資訊，使用者代理和訪問控制等。

studyBot

studyBot蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解studyBot基本資訊，使用者代理和訪問控制等。

AASA-Bot

AASA-Bot蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解AASA-Bot基本資訊，使用者代理和訪問控制等。

Tranco Crawler

Tranco Crawler蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解Tranco Crawler基本資訊，使用者代理和訪問控制等。

如何做搜尋引擎蜘蛛日誌分析

搜尋引擎蜘蛛日誌檔案是一種非常強大但未被站長充分利用的檔案，分析它可以獲取有關每個搜尋引擎如何爬取網站內容的相關資訊點，及檢視搜尋引擎蜘蛛在一段時間內的行為。

什麼是抓取預算（Crawl Budget）及如何最大化其利用價值

抓取預算（Crawl Budget），您又可以將之稱為抓取頻率、抓取量。這個量一般是由搜尋引擎蜘蛛根據網站的質量度和權重給域名分配的。理解抓取預算的定義，重要性及最大化其效率，這有利於網站的索引、排名。

怎樣才算有利於SEO的網站結構

眾所周知，扁平且層級不超過三級的網站結構是最有利於搜尋引擎蜘蛛爬取的。顯淺的一句看似易懂但如深入，又未必是那麼容易理解。下面我們將深入瞭解網站結構的定義，重要性及實踐，以便於各位技術開發、站長和SEOer在未來的網站開發及運營中應用。

為什麼要控制Googlebot抓取速度？

在本文中，我們將瞭解您為什麼要控制Googlebot以及如何控制Googlebot和其他搜尋引擎爬蟲的抓取速度。

如何攔截Google和Bing訪問您的網站？

在本文中，我們將解釋如何遮蔽Googlebot和Bingbot，遮蔽爬蟲後會發生什麼以及出現爬取問題的常見原因。

Bing網站管理員工具Bingbot網站爬取頻率設定

Bing網站管理員工具中的爬網空間功能允許網站管理員控制Bingbot抓取您的網站的速率。當您的網站上有訪問者以適當地管理頻寬時，需要進行爬網控制以限制Bingbot和Googlebot等搜尋引擎蜘蛛的活動。

WordPress攔截IP地址的6種方法

當網站規模擴大時，您需要採取某些措施來限制來自評論垃圾郵件傳送者、無效機器人和人類攻擊者的流量。這對於保護您的伺服器資源可用於真實使用者以及您支付託管費用以獲得真實訪問者至關重要。在本文中，我們將解釋在WordPress中攔截IP地址的6種方法。

如何禁止搜尋引擎索引WordPress網站

您可能想要隱藏站點上的內容的原因有很多，但依靠“建議搜尋引擎不索引本站點”選項並不是確保此類內容不被看到的最佳方法。除非您想在網路上隱藏您的整個網站，否則永遠不要單擊此選項，因為如果不小心切換，它會對您的SEO造成巨大損害。

AntBot

基本資訊

使用者代理

訪問控制

是否攔截AntBot？

通過Robots.txt攔截

更多資訊

站長工具

常見蜘蛛/爬蟲

相關文章