COMODOSpider
COMODOSpider蜘蛛/爬蟲屬於其他型別,由Comodo Group, Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解COMODOSpider基本資訊,使用者代理和訪問控制等。
基本資訊
COMODOSpider的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲,可能存在資訊不明的情況。
- 蜘蛛/爬蟲名稱
- COMODOSpider
- 型別
- 其他
- 開發商
-
Comodo Group, Inc.
- 當前狀態
-
活動
使用者代理
關於COMODOSpider蜘蛛或者爬蟲的使用者代理字串,IP地址和伺服器,所在地等資訊如下表格所示:
Comodo SSL Checker
-
Comodo SSL Checker
-
CrazyWebCrawler-Spider 0.9.10
-
CrazyWebCrawler-Spider 0.9.4
-
CrazyWebCrawler-Spider 0.9.2
-
CrazyWebCrawler-Spider 0.9.0
-
Comodo-Webinspector-Crawler 2.2.1
-
Comodo-Webinspector-Crawler 2.2.2
-
Comodo-Webinspector-Crawler 2.2.0
-
Comodo-Webinspector-Crawler 2.1
-
Comodo Spider 1.2
-
Comodo Spider 1.1
-
Comodo-Certificates-Spider
-
COMODOSpider
-
COMODOSpider
- 使用者代理字串
- Comodo SSL Checker
- 首次出現
- 2010-01-05 19:09:46
- 最後出現
- 2018-08-19 07:29:34
- 遵循robots.txt
- 未知
- 來源
-
IP地址(6) |
伺服器名稱 |
所屬國家 |
91.199.212.132 |
secure.comodo.net |
GB |
178.255.87.242 |
no-dns-yet.ccanet.co.uk |
GB |
91.212.12.91 |
sslanalyzer.comodoca.com |
GB |
178.255.87.226 |
eth5.brad-fw.brad.office.ccanet.co.uk |
GB |
178.255.87.241 |
no-dns-yet.ccanet.co.uk |
GB |
91.212.12.60 |
search.comodo.com |
GB |
- 使用者代理字串
- CRAZYWEBCRAWLER 0.9.10, http://www.crazywebcrawler.com
- 首次出現
- 2015-12-19 09:53:17
- 最後出現
- 2018-06-28 17:42:11
- 遵循robots.txt
- 未知
- 來源
-
IP地址(57) |
伺服器名稱 |
所屬國家 |
192.241.150.142 |
? |
US |
198.211.100.23 |
? |
US |
128.199.121.246 |
? |
SG |
104.131.204.19 |
? |
US |
162.243.167.137 |
162.243.167.137 |
US |
198.199.66.93 |
? |
US |
192.81.211.149 |
192.81.211.149 |
US |
192.241.130.186 |
192.241.130.186 |
US |
128.199.171.73 |
? |
SG |
104.131.199.240 |
? |
US |
- 使用者代理字串
- CRAZYWEBCRAWLER 0.9.4, http://www.crazywebcrawler.com
- 首次出現
- 2015-06-17 12:11:35
- 最後出現
- 2015-06-17 12:11:35
- 遵循robots.txt
- 未知
- 來源
-
IP地址(3) |
伺服器名稱 |
所屬國家 |
128.199.143.250 |
? |
SG |
128.199.167.144 |
? |
SG |
178.62.229.171 |
server.rohit.com |
NL |
- 使用者代理字串
- CRAZYWEBCRAWLER 0.9.2, http://www.crazywebcrawler.com
- 首次出現
- 2015-04-03 12:03:28
- 最後出現
- 2015-04-03 12:03:28
- 遵循robots.txt
- 未知
- 來源
-
IP地址(2) |
伺服器名稱 |
所屬國家 |
178.62.70.240 |
? |
GB |
104.236.172.194 |
? |
US |
- 使用者代理字串
- crazywebcrawler 0.9.0, http://www.crazywebcrawler.com
- 首次出現
- 2014-08-14 09:15:00
- 最後出現
- 2014-10-09 20:50:13
- 遵循robots.txt
- 未知
- 來源
-
IP地址(18) |
伺服器名稱 |
所屬國家 |
162.243.20.40 |
tmp-lcx.web-dimensions.net |
US |
192.241.156.106 |
192.241.156.106 |
US |
107.170.187.89 |
107.170.187.89 |
US |
104.131.192.24 |
104.131.192.24 |
US |
162.243.206.109 |
162.243.206.109 |
US |
107.170.92.69 |
107.170.92.69 |
US |
192.241.142.197 |
192.241.142.197 |
US |
162.243.57.252 |
empts.com.br |
US |
178.62.207.234 |
gisting-1.gistingspeciaalbieren.nl |
NL |
104.131.85.76 |
104.131.85.76 |
US |
- 使用者代理字串
- Comodo-Webinspector-Crawler 2.2.1, http://www.comodorobot.com
- 首次出現
- 2014-07-13 16:52:27
- 最後出現
- 2014-07-13 16:52:27
- 遵循robots.txt
- 未知
- 來源
-
IP地址(1) |
伺服器名稱 |
所屬國家 |
5.101.100.40 |
? |
NL |
- 使用者代理字串
- Comodo-Webinspector-Crawler 2.2.2, http://www.comodorobot.com
- 首次出現
- 2014-12-28 07:19:23
- 最後出現
- 2014-07-07 21:29:47
- 遵循robots.txt
- 未知
- 來源
-
IP地址(1) |
伺服器名稱 |
所屬國家 |
162.243.240.103 |
host01.nyc.pub.sparkspace.io |
US |
- 使用者代理字串
- Comodo-Webinspector-Crawler 2.2.0, http://www.comodorobot.com
- 首次出現
- 2014-12-28 07:19:23
- 最後出現
- 2014-06-17 17:48:51
- 遵循robots.txt
- 未知
- 來源
-
IP地址(3) |
伺服器名稱 |
所屬國家 |
208.68.38.162 |
? |
US |
198.199.120.136 |
198.199.120.136 |
US |
95.85.14.216 |
95.85.14.216 |
NL |
- 使用者代理字串
- Comodo-Webinspector-Crawler 2.1
- 首次出現
- 2014-05-27 21:38:12
- 最後出現
- 2014-05-29 21:00:33
- 遵循robots.txt
- 未知
- 來源
-
IP地址(6) |
伺服器名稱 |
所屬國家 |
192.241.128.134 |
? |
US |
128.199.200.73 |
? |
SG |
188.226.237.128 |
zabbix-backend.idealscorp.com |
NL |
192.241.156.76 |
? |
US |
188.226.233.97 |
? |
NL |
192.241.156.47 |
? |
US |
- 使用者代理字串
- Comodo Spider 1.2
- 首次出現
- 2014-12-28 07:19:20
- 最後出現
- 2014-01-31 14:41:11
- 遵循robots.txt
- 未知
- 來源
-
IP地址(4) |
伺服器名稱 |
所屬國家 |
107.170.247.80 |
hurtado.alohatone.com |
US |
107.170.247.98 |
dev1.rushon.com |
US |
107.170.28.30 |
mail.exratione.com |
US |
178.255.80.147 |
reth1-252.dwdcccsg.dela.clif.dc.ccanet.co.uk |
GB |
- 使用者代理字串
- Comodo Spider 1.1
- 首次出現
- 2014-01-12 13:27:09
- 最後出現
- 2014-01-12 13:27:09
- 遵循robots.txt
- 未知
- 來源
-
IP地址(1) |
伺服器名稱 |
所屬國家 |
178.255.80.147 |
reth1-252.dwdcccsg.dela.clif.dc.ccanet.co.uk |
GB |
- 使用者代理字串
- Comodo-Certificates-Spider
- 首次出現
- 2009-12-16 12:14:54
- 最後出現
- 2013-08-26 16:39:59
- 遵循robots.txt
- 未知
- 來源
-
IP地址(5) |
伺服器名稱 |
所屬國家 |
178.255.87.241 |
no-dns-yet.ccanet.co.uk |
GB |
91.209.196.76 |
search.comodo.com |
GB |
91.212.12.58 |
mkt-search.comodo.com |
GB |
91.212.12.60 |
search.comodo.com |
GB |
- 使用者代理字串
- COMODOspider/Nutch-1.0
- 首次出現
- 2010-01-19 18:19:58
- 最後出現
- 2011-09-28 06:19:07
- 遵循robots.txt
- 未知
- 來源
-
IP地址(4) |
伺服器名稱 |
所屬國家 |
178.255.87.241 |
no-dns-yet.ccanet.co.uk |
GB |
91.212.12.60 |
search.comodo.com |
GB |
91.209.196.76 |
search.comodo.com |
GB |
91.212.12.59 |
search.comodo.com |
GB |
114.255.52.162 |
114.255.52.162 |
AU |
- 使用者代理字串
- COMODOspider/Nutch-1.0
- 首次出現
- 2010-01-19 18:19:58
- 最後出現
- 2011-09-28 06:19:07
- 遵循robots.txt
- 未知
- 來源
-
IP地址(4) |
伺服器名稱 |
所屬國家 |
91.209.196.76 |
search.comodo.com |
GB |
91.212.12.59 |
search.comodo.com |
GB |
91.212.12.60 |
search.comodo.com |
GB |
114.255.52.162 |
114.255.52.162 |
AU |
訪問控制
瞭解如何控制COMODOSpider訪問許可權,避免COMODOSpider抓取行為不當。
是否攔截COMODOSpider?
對於未知蜘蛛或者爬蟲。它的用途對網站來說可能是好的,也可能是壞的,這取決於它是什麼。所以說,這需要站長進一步分析判斷這些尚不明確的爬蟲行為,再作最終決定。
但,根據以往的經驗,未宣告行為目的及未命名的蜘蛛爬蟲,通常都有不可告人的祕密,我們理應對其行為進行控制,比如攔截。
通過Robots.txt攔截
您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 COMODOSpider 或限制其訪問許可權。我們建議安裝 Spider Analyser
外掛,以檢查它是否真正遵循這些規則。
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: COMODOSpider
Disallow: /
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: COMODOSpider
Disallow: /
您無需手動執行此操作,可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。