test

test蜘蛛/爬蟲屬於爬蟲型別,由Unknown Author開發執行。您可以繼續閱讀下方資訊,以深入瞭解test基本資訊,使用者代理和訪問控制等。

基本資訊

test的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲,可能存在資訊不明的情況。
蜘蛛/爬蟲名稱
test
型別
爬蟲
開發商
Unknown Author
當前狀態
活動

使用者代理

關於test蜘蛛或者爬蟲的使用者代理字串,IP地址和伺服器,所在地等資訊如下表格所示:
Testcrawler
使用者代理字串
Testcrawler
首次出現
2024-02-09 20:51:01
最後出現
2024-08-14 11:29:15
遵循robots.txt
未知
來源
IP地址(4) 伺服器名稱 所屬國家
185.145.220.85 ppp-185-145-220-85.pool13.filstalnetz.de DE
109.90.93.250 ip-109-090-093-250.um36.pools.vodafone-ip.de DE
185.113.153.58 ppp-185-113-153-58.pool21.filstalnetz.de DE
185.145.222.38 ppp-185-145-220-38.pool15.filstalnetz.de DE
使用者代理字串
Tony Test
首次出現
2023-07-07 11:42:17
最後出現
2023-07-07 11:42:17
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
86.12.225.222 cpc85956-sotn17-2-0-cust221.15-1.cable.virginm.net GB
使用者代理字串
Mozilla/5.0 (compatible; TestBot/0.1; +In_the_test_phase,_if_the_spider_brings_you_trouble,_please_add_our_IP_to_the_blacklist._Thank_you.)
首次出現
2020-12-18 05:30:50
最後出現
2021-03-09 01:25:07
遵循robots.txt
未知
來源
IP地址(6) 伺服器名稱 所屬國家
81.69.254.180 81.69.254.180 CN
139.155.54.119 139.155.54.119 CN
106.53.82.40 106.53.82.40 CN
132.232.81.163 132.232.81.163 CN
139.155.16.233 139.155.16.233 CN
106.53.83.56 106.53.83.56 CN
使用者代理字串
test/1.0
首次出現
2020-11-22 12:26:06
最後出現
2020-11-22 12:26:06
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
223.166.32.199 223.166.32.199 CN
使用者代理字串
Only a test!
首次出現
2020-03-15 10:30:38
最後出現
2020-03-15 10:30:38
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
88.99.72.71 server314.dnslake.com DE
使用者代理字串
TEST
首次出現
2020-01-28 18:35:58
最後出現
2020-01-28 18:35:58
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
88.214.26.9 88.214.26.9 DE
74.84.150.150 sharesasset.net US
68.69.184.202 ? US
78.60.212.80 78-60-212-80.static.zebra.lt LT
141.98.83.139 141.98.83.139 PA
5.2.69.42 5.2.69.42 NL
185.220.101.215 tor-exit-215.for-privacy.net DE
71.237.36.50 71.237.36.50 US
162.245.236.114 ? US
91.248.213.186 dyndsl-091-248-213-186.ewe-ip-backbone.de DE
217.61.111.79 host79-111-61-217.static.arubacloud.com DE
使用者代理字串
testing
首次出現
2019-08-28 11:21:46
最後出現
2019-08-28 11:21:46
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
96.91.178.67 96-91-178-67-static.hfc.comcastbusiness.net US
使用者代理字串
Testbot/Testbot-0.1 (http://www.example.com/)
首次出現
2018-01-19 07:17:11
最後出現
2018-01-19 16:21:27
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
117.205.148.44 ? IN
117.205.147.77 ? IN
使用者代理字串
test bot
首次出現
2017-11-08 20:51:29
最後出現
2017-11-11 23:58:44
遵循robots.txt
未知
來源
IP地址(4) 伺服器名稱 所屬國家
54.164.111.162 ec2-54-164-111-162.compute-1.amazonaws.com US
54.242.217.82 ec2-54-242-217-82.compute-1.amazonaws.com US
54.210.41.40 ec2-54-210-41-40.compute-1.amazonaws.com US
54.158.148.163 ec2-54-158-148-163.compute-1.amazonaws.com US
使用者代理字串
Connor-Test
首次出現
2017-11-01 22:43:46
最後出現
2017-11-01 22:43:47
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
45.76.134.164 ? GB
使用者代理字串
TestCrawler 2.0
首次出現
2017-07-07 10:48:23
最後出現
2017-07-07 10:48:23
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
54.90.170.122 ec2-54-90-170-122.compute-1.amazonaws.com US

訪問控制

瞭解如何控制test訪問許可權,避免test抓取行為不當。

是否攔截test?

可以考慮攔截。。爬蟲通常會下載公開的網際網路內容,這些內容預設情況下可以免費訪問。不過,如果你不希望你的內容被用於未經授權的目的,你應該攔截它們。

通過Robots.txt攔截

您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 test 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛,以檢查它是否真正遵循這些規則。

Plain text
Copy to clipboard
Open code in new window
EnlighterJS 3 Syntax Highlighter
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: test
Disallow: /
# robots.txt # 下列程式碼一般情況可以攔截該代理 User-agent: test Disallow: /
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: test
Disallow: /

您無需手動執行此操作,可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。

常見蜘蛛/爬蟲

Common Spiders
MyEducationalCrawler
MyEducationalCrawler蜘蛛/爬蟲屬於爬蟲型別,由Unknown Author開發執行。您可以繼續閱讀下方資訊,以深入瞭解MyEducationalCrawler基本資訊,使用者代理和訪問控制等。
ZAKREGEX-Scanner
ZAKREGEX-Scanner蜘蛛/爬蟲屬於爬蟲型別,由Unknown Author開發執行。您可以繼續閱讀下方資訊,以深入瞭解ZAKREGEX-Scanner基本資訊,使用者代理和訪問控制等。
Crawler-IP-Fetcher
Crawler-IP-Fetcher蜘蛛/爬蟲屬於爬蟲型別,由Unknown Author開發執行。您可以繼續閱讀下方資訊,以深入瞭解Crawler-IP-Fetcher基本資訊,使用者代理和訪問控制等。
DARPResearchBot
DARPResearchBot蜘蛛/爬蟲屬於爬蟲型別,由Unknown Author開發執行。您可以繼續閱讀下方資訊,以深入瞭解DARPResearchBot基本資訊,使用者代理和訪問控制等。
xfa1
xfa1蜘蛛/爬蟲屬於爬蟲型別,由Unknown Author開發執行。您可以繼續閱讀下方資訊,以深入瞭解xfa1基本資訊,使用者代理和訪問控制等。
MassScanner
MassScanner蜘蛛/爬蟲屬於爬蟲型別,由Unknown Author開發執行。您可以繼續閱讀下方資訊,以深入瞭解MassScanner基本資訊,使用者代理和訪問控制等。
robots-bulk-crawler
robots-bulk-crawler蜘蛛/爬蟲屬於爬蟲型別,由Unknown Author開發執行。您可以繼續閱讀下方資訊,以深入瞭解robots-bulk-crawler基本資訊,使用者代理和訪問控制等。
studyBot
studyBot蜘蛛/爬蟲屬於爬蟲型別,由Unknown Author開發執行。您可以繼續閱讀下方資訊,以深入瞭解studyBot基本資訊,使用者代理和訪問控制等。

相關文章

Related Articles