AntBot

AntBot蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解AntBot基本資訊，使用者代理和訪問控制等。

基本資訊

AntBot的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲，可能存在資訊不明的情況。

蜘蛛/爬蟲名稱: AntBot

型別: 爬蟲

開發商: Unknown Author

當前狀態: 活動

使用者代理

關於AntBot蜘蛛或者爬蟲的使用者代理字串，IP地址和伺服器，所在地等資訊如下表格所示：

使用者代理字串: AntBot

首次出現: 2023-10-17 22:51:36

最後出現: 2023-11-05 16:00:56

遵循robots.txt: 未知

來源

IP地址(91)	伺服器名稱	所屬國家
83.149.125.220	hosted-by.leaseweb.com	NL
69.55.58.107	69.55.58.107	US
69.55.58.103	69.55.58.103	US
69.55.58.105	69.55.58.105	US
69.55.58.104	69.55.58.104	US

使用者代理字串: Ant.com beta/1.0 (Crawling antmarks; https://www.ant.com; admin@ant.com)

首次出現: 2018-10-21 07:03:24

最後出現: 2023-02-01 22:01:14

遵循robots.txt: 否

來源

IP地址(1)	伺服器名稱	所屬國家
185.120.68.164	185.120.68.164	CZ

使用者代理字串: Ant.com/1.0 (Crawling antmarks; https://www.ant.com; admin@ant.com)

首次出現: 2017-11-07 05:14:50

最後出現: 2017-11-07 05:14:50

遵循robots.txt: 未知

來源

IP地址(1)	伺服器名稱	所屬國家
185.120.68.164	185.120.68.164	CZ

使用者代理字串: Mozilla/5.0 (compatible; AntBot/1.0; +http://www.ant.com/)

首次出現: 2010-11-10 22:08:59

最後出現: 2011-01-06 16:26:50

遵循robots.txt: 未知

來源

IP地址(7)	伺服器名稱	所屬國家
83.149.125.220	hosted-by.leaseweb.com	NL
69.55.58.102	69.55.58.102	US
69.55.58.103	69.55.58.103	US
69.55.58.105	69.55.58.105	US
69.55.58.106	69.55.58.106	US

使用者代理字串: Mozilla/5.0 (compatible; AntBot/1.0; +http://www.ant.com/)

首次出現: 2010-11-10 22:08:59

最後出現: 2011-01-06 16:26:50

遵循robots.txt: 未知

來源

IP地址(6)	伺服器名稱	所屬國家
69.55.58.106	69.55.58.106	US
69.55.58.107	69.55.58.107	US
69.55.58.108	69.55.58.108	US
69.55.58.102	69.55.58.102	US
69.55.58.103	69.55.58.103	US

使用者代理字串: AntBot/Ant-Nutch-1.1 (Ant Nutch Crawler; http://www.ant.com; crawler@ant.com)

首次出現: 2010-09-28 13:27:27

最後出現: 2010-09-29 14:04:45

遵循robots.txt: 未知

來源

IP地址(3)	伺服器名稱	所屬國家
69.55.58.103	69.55.58.103	US
69.55.58.105	69.55.58.105	US
69.55.58.107	69.55.58.107	US

使用者代理字串: Ant/Ant-Nutch-1.1 (Ant Nutch Crawler; http://www.ant.com; crawler@ant.com)

首次出現: 2010-08-03 02:52:04

最後出現: 2010-09-16 07:38:02

遵循robots.txt: 未知

來源

IP地址(8)	伺服器名稱	所屬國家
69.55.58.104	69.55.58.104	US
69.55.58.105	69.55.58.105	US
69.55.58.106	69.55.58.106	US
69.55.58.107	69.55.58.107	US
69.55.58.108	69.55.58.108	US

訪問控制

瞭解如何控制AntBot訪問許可權，避免AntBot抓取行為不當。

是否攔截AntBot？

可以考慮攔截。。爬蟲通常會下載公開的網際網路內容，這些內容預設情況下可以免費訪問。不過，如果你不希望你的內容被用於未經授權的目的，你應該攔截它們。

通過Robots.txt攔截

您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 AntBot 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛，以檢查它是否真正遵循這些規則。

# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: AntBot
Disallow: /

您無需手動執行此操作，可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。

站長工具

我們為站長量身定做的高效工具集。

檢視全部工具

常見蜘蛛/爬蟲

Common Spiders

Seamus

Seamus蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解Seamus基本資訊，使用者代理和訪問控制等。

SupaGuard

SupaGuard蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解SupaGuard基本資訊，使用者代理和訪問控制等。

employer-address-finder

employer-address-finder蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解employer-address-finder基本資訊，使用者代理和訪問控制等。

SocialMediaScrapperv2

SocialMediaScrapperv2蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解SocialMediaScrapperv2基本資訊，使用者代理和訪問控制等。

DomainCrawler

DomainCrawler蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解DomainCrawler基本資訊，使用者代理和訪問控制等。

ComplianceChecker

ComplianceChecker蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解ComplianceChecker基本資訊，使用者代理和訪問控制等。

BusinessNameBot

BusinessNameBot蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解BusinessNameBot基本資訊，使用者代理和訪問控制等。

BitFire-IconUpscaler

BitFire-IconUpscaler蜘蛛/爬蟲屬於爬蟲型別，由Unknown Author開發執行。您可以繼續閱讀下方資訊，以深入瞭解BitFire-IconUpscaler基本資訊，使用者代理和訪問控制等。

如何做搜尋引擎蜘蛛日誌分析

搜尋引擎蜘蛛日誌檔案是一種非常強大但未被站長充分利用的檔案，分析它可以獲取有關每個搜尋引擎如何爬取網站內容的相關資訊點，及檢視搜尋引擎蜘蛛在一段時間內的行為。

什麼是抓取預算（Crawl Budget）及如何最大化其利用價值

抓取預算（Crawl Budget），您又可以將之稱為抓取頻率、抓取量。這個量一般是由搜尋引擎蜘蛛根據網站的質量度和權重給域名分配的。理解抓取預算的定義，重要性及最大化其效率，這有利於網站的索引、排名。

怎樣才算有利於SEO的網站結構

眾所周知，扁平且層級不超過三級的網站結構是最有利於搜尋引擎蜘蛛爬取的。顯淺的一句看似易懂但如深入，又未必是那麼容易理解。下面我們將深入瞭解網站結構的定義，重要性及實踐，以便於各位技術開發、站長和SEOer在未來的網站開發及運營中應用。

為什麼要控制Googlebot抓取速度？

在本文中，我們將瞭解您為什麼要控制Googlebot以及如何控制Googlebot和其他搜尋引擎爬蟲的抓取速度。

如何攔截Google和Bing訪問您的網站？

在本文中，我們將解釋如何遮蔽Googlebot和Bingbot，遮蔽爬蟲後會發生什麼以及出現爬取問題的常見原因。

Bing網站管理員工具Bingbot網站爬取頻率設定

Bing網站管理員工具中的爬網空間功能允許網站管理員控制Bingbot抓取您的網站的速率。當您的網站上有訪問者以適當地管理頻寬時，需要進行爬網控制以限制Bingbot和Googlebot等搜尋引擎蜘蛛的活動。

WordPress攔截IP地址的6種方法

當網站規模擴大時，您需要採取某些措施來限制來自評論垃圾郵件傳送者、無效機器人和人類攻擊者的流量。這對於保護您的伺服器資源可用於真實使用者以及您支付託管費用以獲得真實訪問者至關重要。在本文中，我們將解釋在WordPress中攔截IP地址的6種方法。

如何禁止搜尋引擎索引WordPress網站

您可能想要隱藏站點上的內容的原因有很多，但依靠“建議搜尋引擎不索引本站點”選項並不是確保此類內容不被看到的最佳方法。除非您想在網路上隱藏您的整個網站，否則永遠不要單擊此選項，因為如果不小心切換，它會對您的SEO造成巨大損害。

AntBot

基本資訊

使用者代理

訪問控制

是否攔截AntBot？

通過Robots.txt攔截

更多資訊

站長工具

常見蜘蛛/爬蟲

相關文章