masscan

masscan蜘蛛/爬蟲屬於工具型別,由Errata Security – Robert David Graham開發執行。您可以繼續閱讀下方資訊,以深入瞭解masscan基本資訊,使用者代理和訪問控制等。

基本資訊

masscan的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲,可能存在資訊不明的情況。
蜘蛛/爬蟲名稱
masscan
型別
工具
開發商
Errata Security - Robert David Graham
當前狀態
活動

使用者代理

關於masscan蜘蛛或者爬蟲的使用者代理字串,IP地址和伺服器,所在地等資訊如下表格所示:
ivre-masscan/1.3
使用者代理字串
ivre-masscan/1.3 https://github.com/robertdavidgraham/
首次出現
2024-02-13 14:01:42
最後出現
2024-11-27 17:59:30
遵循robots.txt
未知
來源
IP地址(14) 伺服器名稱 所屬國家
79.110.62.197 79.110.62.197 BG
185.224.128.251 185.224.128.251 NL
161.97.99.229 vmi674571.contaboserver.net DE
109.205.180.61 vmd80250.contaboserver.net DE
45.128.232.129 129.232.128.45.pfcloud.io NL
使用者代理字串
masscan-ng/1.3 (https://github.com/bi-zone/masscan-ng)
首次出現
2021-06-19 23:13:58
最後出現
2024-11-05 13:32:05
遵循robots.txt
未知
來源
IP地址(27) 伺服器名稱 所屬國家
109.248.6.124 crd.bi.zone RU
109.248.6.72 crd.bi.zone RU
109.248.6.110 crd.bi.zone RU
109.248.6.91 crd.bi.zone RU
109.248.6.35 crd.bi.zone RU
使用者代理字串
masscan/1.3
首次出現
2023-09-23 14:44:58
最後出現
2023-09-23 14:44:58
遵循robots.txt
未知
來源
IP地址(156) 伺服器名稱 所屬國家
104.152.52.137 internettl.org US
212.51.151.228 212-51-151-228.fiber7.init7.net CH
85.207.120.16 85-207-120-16.static.bluetone.cz CZ
104.152.52.158 internettl.org US
146.70.57.42 146.70.57.42 US
使用者代理字串
sysscan/1.0 (https://github.com/robertdavidgraham/sysscan)
首次出現
2017-10-06 06:09:30
最後出現
2020-05-01 00:05:17
遵循robots.txt
未知
來源
IP地址(9) 伺服器名稱 所屬國家
62.173.152.144 www.bmp.rt RU
46.17.43.187 ? RU
216.244.83.210 2-chronicles.ecc12.com CA
46.166.151.17 . NL
155.94.88.138 nextotor.com US
使用者代理字串
masscan/1.0
首次出現
2017-05-11 12:34:52
最後出現
2017-11-21 19:14:23
遵循robots.txt
未知
來源
IP地址(74) 伺服器名稱 所屬國家
92.205.56.26 ip-92-205-56-26.ip.secureserver.net FR
69.55.55.155 locallbox.com.br US
173.249.45.95 vmi376269.contaboserver.net DE
195.162.24.148 serwer.glinmet2.kylos.net.pl PL
107.172.214.60 107-172-214-60-host.colocrossing.com US
使用者代理字串
masscan/1.0
首次出現
2017-05-11 12:34:52
最後出現
2017-11-21 19:14:23
遵循robots.txt
未知
來源
IP地址(10) 伺服器名稱 所屬國家
177.161.124.2 177-161-124-2.user.vivozap.com.br BR
191.201.66.74 191-201-66-74.user.vivozap.com.br BR
71.80.37.6 71-80-37-6.static.kgpt.tn.charter.com US
213.238.195.98 ? SE
180.234.53.176 awbl53-176.qubee.com.bd BD
使用者代理字串
masscan
首次出現
2016-06-30 21:52:28
最後出現
2016-06-30 21:52:28
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
104.192.0.21 ip-104-192-0-21.host.datawagon.net US

訪問控制

瞭解如何控制masscan訪問許可權,避免masscan抓取行為不當。

是否攔截masscan?

可能不需要。工具型別爬蟲通常為網站所有者使用此類工具對網站進行相關服務請求才會出現。當然,實際情況需站長判斷後再作決定。

通過Robots.txt攔截

您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 masscan 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛,以檢查它是否真正遵循這些規則。

# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: masscan
Disallow: /

您無需手動執行此操作,可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。

常見蜘蛛/爬蟲

Common Spiders
SearchScore bot
SearchScore bot蜘蛛/爬蟲屬於工具型別,由Product Specialists Ltd開發執行。您可以繼續閱讀下方資訊,以深入瞭解SearchScore bot基本資訊,使用者代理和訪問控制等。
ModernizeBot
ModernizeBot蜘蛛/爬蟲屬於工具型別,由ModernizeYourWebsite.com開發執行。您可以繼續閱讀下方資訊,以深入瞭解ModernizeBot基本資訊,使用者代理和訪問控制等。
SEODiffBot
SEODiffBot蜘蛛/爬蟲屬於工具型別,由SEODiff開發執行。您可以繼續閱讀下方資訊,以深入瞭解SEODiffBot基本資訊,使用者代理和訪問控制等。
Misskey bot
Misskey bot蜘蛛/爬蟲屬於工具型別,由Misskey Project開發執行。您可以繼續閱讀下方資訊,以深入瞭解Misskey bot基本資訊,使用者代理和訪問控制等。
Validbot
Validbot蜘蛛/爬蟲屬於工具型別,由Jake Olefsky開發執行。您可以繼續閱讀下方資訊,以深入瞭解Validbot基本資訊,使用者代理和訪問控制等。
Google-BusinessLinkVerification
Google-BusinessLinkVerification蜘蛛/爬蟲屬於工具型別,由Google Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Google-BusinessLinkVerification基本資訊,使用者代理和訪問控制等。
StatusNest
StatusNest蜘蛛/爬蟲屬於工具型別,由StatusNest開發執行。您可以繼續閱讀下方資訊,以深入瞭解StatusNest基本資訊,使用者代理和訪問控制等。
Observatory
Observatory蜘蛛/爬蟲屬於工具型別,由Mozilla Foundation開發執行。您可以繼續閱讀下方資訊,以深入瞭解Observatory基本資訊,使用者代理和訪問控制等。

相關文章

Related Articles