Crissy Field bot

Crissy Field bot蜘蛛/爬蟲屬於其他型別,由Crissy Field GmbH開發執行。您可以繼續閱讀下方資訊,以深入瞭解Crissy Field bot基本資訊,使用者代理和訪問控制等。

基本資訊

Crissy Field bot的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲,可能存在資訊不明的情況。
蜘蛛/爬蟲名稱
Crissy Field bot
型別
其他
開發商
Crissy Field GmbH
當前狀態
活動

使用者代理

關於Crissy Field bot蜘蛛或者爬蟲的使用者代理字串,IP地址和伺服器,所在地等資訊如下表格所示:
RepoLookoutBot/v1.1.0-297-gcf436d3
使用者代理字串
RepoLookoutBot/v1.1.0-297-gcf436d3 (abuse reports to abuse@repo-lookout.org)
首次出現
2024-05-25 04:51:43
最後出現
2024-05-25 04:51:43
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
45.135.57.222 45.135.57.222 NL
使用者代理字串
RepoLookoutBot/v1.1.0-287-g0a2fe5c (abuse reports to abuse@repo-lookout.org)
首次出現
2024-02-15 23:43:23
最後出現
2024-02-15 23:43:23
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
45.135.57.222 45.135.57.222 NL
使用者代理字串
RepoLookoutBot/v1.1.0-284-gb201683 (abuse reports to abuse@repo-lookout.org)
首次出現
2024-01-11 17:35:46
最後出現
2024-01-20 15:35:02
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
45.135.57.222 45.135.57.222 NL
45.135.57.32 45.135.57.32 NL
使用者代理字串
RepoLookoutBot/v1.1.0-274-g0030f14 (abuse reports to abuse@repo-lookout.org)
首次出現
2023-10-19 20:06:18
最後出現
2023-10-19 20:06:18
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
45.135.57.222 45.135.57.222 NL
使用者代理字串
RepoLookoutBot/v1.1.0-272-g8fce495 (abuse reports to abuse@repo-lookout.org)
首次出現
2023-10-05 04:44:35
最後出現
2023-10-05 04:44:35
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
45.135.57.32 45.135.57.32 NL
45.135.57.79 45.135.57.79 NL
使用者代理字串
RepoLookoutBot/v1.1.0-257-g0920a65 (abuse reports to abuse@repo-lookout.org)
首次出現
2023-08-02 17:38:02
最後出現
2023-08-02 17:38:02
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
45.135.57.26 45.135.57.26 NL
使用者代理字串
RepoLookoutBot/v1.1.0-141-g52ab5f9 (abuse reports to abuse@repo-lookout.org)
首次出現
2023-06-08 22:50:55
最後出現
2023-06-08 22:50:55
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
3.75.170.117 ec2-3-75-170-117.eu-central-1.compute.amazonaws.com DE
使用者代理字串
RepoLookoutBot/v1.1.0-130-g92d93f9 (abuse reports to abuse@repo-lookout.org)
首次出現
2023-06-02 18:41:13
最後出現
2023-06-02 18:41:13
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
3.70.222.50 ec2-3-70-222-50.eu-central-1.compute.amazonaws.com DE
使用者代理字串
RepoLookoutBot/v1.1.0-124-g90d5adf (abuse reports to abuse@repo-lookout.org)
首次出現
2023-05-28 13:25:34
最後出現
2023-05-28 13:25:34
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
3.72.74.40 ec2-3-72-74-40.eu-central-1.compute.amazonaws.com DE
使用者代理字串
RepoLookoutBot/v1.1.0-97-ged95292 (abuse reports to abuse@repo-lookout.org)
首次出現
2023-05-20 07:38:06
最後出現
2023-05-20 07:38:06
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
3.75.170.117 ec2-3-75-170-117.eu-central-1.compute.amazonaws.com DE
使用者代理字串
RepoLookoutBot/v1.1.0-21-g8daf087 (abuse reports to abuse@repo-lookout.org)
首次出現
2023-03-13 03:06:37
最後出現
2023-03-13 04:33:53
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
3.124.3.208 ec2-3-124-3-208.eu-central-1.compute.amazonaws.com DE
3.75.170.117 ec2-3-75-170-117.eu-central-1.compute.amazonaws.com DE
使用者代理字串
RepoLookoutBot/v1.1.0-15-g693085d (abuse reports to abuse@repo-lookout.org)
首次出現
2023-03-07 04:26:31
最後出現
2023-03-07 04:26:31
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
3.75.170.117 ec2-3-75-170-117.eu-central-1.compute.amazonaws.com DE
使用者代理字串
RepoLookoutBot/v1.1.0-8-gd789292 (abuse reports to abuse@repo-lookout.org)
首次出現
2023-03-01 13:32:46
最後出現
2023-03-01 13:32:46
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
3.70.222.50 ec2-3-70-222-50.eu-central-1.compute.amazonaws.com DE
使用者代理字串
RepoLookoutBot/v1.1.0-6-ge22d59f (abuse reports to abuse@repo-lookout.org)
首次出現
2023-02-13 14:20:08
最後出現
2023-02-21 22:53:35
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
3.75.170.117 ec2-3-75-170-117.eu-central-1.compute.amazonaws.com DE
3.72.74.40 ec2-3-72-74-40.eu-central-1.compute.amazonaws.com DE
使用者代理字串
RepoLookoutBot/v1.1.0-5-ga5a9cff (abuse reports to abuse@repo-lookout.org)
首次出現
2023-02-12 19:04:21
最後出現
2023-02-12 19:04:21
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
3.124.3.208 ec2-3-124-3-208.eu-central-1.compute.amazonaws.com DE
使用者代理字串
RepoLookoutBot/v1.1.0-3-g1e52068 (abuse reports to abuse@repo-lookout.org)
首次出現
2023-01-29 01:10:11
最後出現
2023-01-29 01:10:11
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
3.124.3.208 ec2-3-124-3-208.eu-central-1.compute.amazonaws.com DE
3.70.222.50 ec2-3-70-222-50.eu-central-1.compute.amazonaws.com DE
使用者代理字串
RepoLookoutBot/v1.1.0-1-gf84e7a9 (abuse reports to abuse@repo-lookout.org)
首次出現
2023-01-23 15:08:54
最後出現
2023-01-23 15:08:54
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
3.75.170.117 ec2-3-75-170-117.eu-central-1.compute.amazonaws.com DE
使用者代理字串
RepoLookoutBot/1.0.0 (abuse reports to abuse@repo-lookout.org)
首次出現
2022-05-18 17:00:24
最後出現
2022-12-20 01:43:06
遵循robots.txt
未知
來源
IP地址(3) 伺服器名稱 所屬國家
3.72.74.40 ec2-3-72-74-40.eu-central-1.compute.amazonaws.com DE
3.120.193.160 ec2-3-120-193-160.eu-central-1.compute.amazonaws.com DE
3.124.3.208 ec2-3-124-3-208.eu-central-1.compute.amazonaws.com DE
使用者代理字串
RepoLookoutBotBot/0.0.1 (abuse reports to abuse@crissyfield.de)
首次出現
2022-04-13 16:46:45
最後出現
2022-04-13 16:46:45
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
3.71.106.114 ec2-3-71-106-114.eu-central-1.compute.amazonaws.com DE
使用者代理字串
GitCrawlerBot/0.0.1 (abuse reports to abuse@crissyfield.de)
首次出現
2022-03-13 13:23:21
最後出現
2022-03-18 18:31:42
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
18.156.198.15 ec2-18-156-198-15.eu-central-1.compute.amazonaws.com DE
18.185.178.79 ec2-18-185-178-79.eu-central-1.compute.amazonaws.com DE

訪問控制

瞭解如何控制Crissy Field bot訪問許可權,避免Crissy Field bot抓取行為不當。

是否攔截Crissy Field bot?

對於未知蜘蛛或者爬蟲。它的用途對網站來說可能是好的,也可能是壞的,這取決於它是什麼。所以說,這需要站長進一步分析判斷這些尚不明確的爬蟲行為,再作最終決定。 但,根據以往的經驗,未宣告行為目的及未命名的蜘蛛爬蟲,通常都有不可告人的祕密,我們理應對其行為進行控制,比如攔截。

通過Robots.txt攔截

您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 Crissy Field bot 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛,以檢查它是否真正遵循這些規則。

Plain text
Copy to clipboard
Open code in new window
EnlighterJS 3 Syntax Highlighter
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: Crissy Field bot
Disallow: /
# robots.txt # 下列程式碼一般情況可以攔截該代理 User-agent: Crissy Field bot Disallow: /
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: Crissy Field bot
Disallow: /

您無需手動執行此操作,可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。

常見蜘蛛/爬蟲

Common Spiders
Fraunhofer crawler
Fraunhofer crawler蜘蛛/爬蟲屬於其他型別,由Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Fraunhofer crawler基本資訊,使用者代理和訪問控制等。
companyspotter
companyspotter蜘蛛/爬蟲屬於其他型別,由CompanySpotter BV開發執行。您可以繼續閱讀下方資訊,以深入瞭解companyspotter基本資訊,使用者代理和訪問控制等。
DataForSeo bot
DataForSeo bot蜘蛛/爬蟲屬於其他型別,由DataForSEO OU開發執行。您可以繼續閱讀下方資訊,以深入瞭解DataForSeo bot基本資訊,使用者代理和訪問控制等。
CloudFlare crawler
CloudFlare crawler蜘蛛/爬蟲屬於其他型別,由CloudFlare, Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解CloudFlare crawler基本資訊,使用者代理和訪問控制等。
Odin
Odin蜘蛛/爬蟲屬於其他型別,由Cyble, Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Odin基本資訊,使用者代理和訪問控制等。
Chrome Privacy Preserving Prefetch Proxy
Chrome Privacy Preserving Prefetch Proxy蜘蛛/爬蟲屬於其他型別,由Google Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Chrome Privacy Preserving Prefetch Proxy基本資訊,使用者代理和訪問控制等。
EFF crawler
EFF crawler蜘蛛/爬蟲屬於其他型別,由Electronic Frontier Foundation開發執行。您可以繼續閱讀下方資訊,以深入瞭解EFF crawler基本資訊,使用者代理和訪問控制等。
Modat crawler
Modat crawler蜘蛛/爬蟲屬於其他型別,由Modat B.V.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Modat crawler基本資訊,使用者代理和訪問控制等。

相關文章

Related Articles