Re-re crawler

Re-re crawler蜘蛛/爬蟲屬於其他型別,由Re-Re Web Studio開發執行。您可以繼續閱讀下方資訊,以深入瞭解Re-re crawler基本資訊,使用者代理和訪問控制等。

基本資訊

Re-re crawler的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲,可能存在資訊不明的情況。
蜘蛛/爬蟲名稱
Re-re crawler
型別
其他
開發商
Re-Re Web Studio
當前狀態
活動

使用者代理

關於Re-re crawler蜘蛛或者爬蟲的使用者代理字串,IP地址和伺服器,所在地等資訊如下表格所示:
Re-re Studio
使用者代理字串
Re-re Studio (+http://2re.site/)
首次出現
2019-12-12 04:40:30
最後出現
2020-04-20 05:20:28
遵循robots.txt
未知
來源
IP地址(5) 伺服器名稱 所屬國家
109.94.211.139 109.94.211.139 RU
84.54.28.117 84.54.28.117 RU
45.93.12.228 45.93.12.228 RU
45.94.20.171 ? RU
45.147.0.125 ? RU
使用者代理字串
7Siters/1.09 (+https://7ooo.ru/siters/)
首次出現
2020-02-26 10:04:44
最後出現
2020-03-21 07:20:23
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
31.40.202.182 ? RU
91.188.212.153 91.188.212.153 RU
使用者代理字串
7Siters/1.08 (+https://7ooo.ru/siters/)
首次出現
2019-07-08 10:17:10
最後出現
2020-01-19 08:38:53
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
45.147.252.191 ? RU
185.154.72.12 ? RU
使用者代理字串
7Siters/1.08w (+https://7ooo.ru/siters/)
首次出現
2020-01-16 06:20:30
最後出現
2020-01-16 06:20:30
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
193.150.99.21 193.150.99.21 RU
使用者代理字串
Re-re Studio (+http://rere.7ooo.ru/)
首次出現
2019-12-07 04:54:02
最後出現
2019-12-09 10:36:43
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
45.93.12.228 ? RU
45.145.169.69 45.145.169.69 RU
使用者代理字串
Re-re Studio (+http://re-re.ru/)
首次出現
2017-12-04 05:00:38
最後出現
2019-09-07 05:13:27
遵循robots.txt
未知
來源
IP地址(9) 伺服器名稱 所屬國家
91.199.112.169 91.199.112.169 UA
45.131.47.234 45.131.47.234 RU
91.241.182.28 91.241.182.28 UA
92.249.15.225 92.249.15.225 RU
193.187.106.208 193.187.106.208 RU
46.150.246.64 46.150.246.64 RU
45.138.147.8 45.138.147.8 RU
194.156.105.15 194.156.105.15 RU
94.154.191.236 94.154.191.236 RU
45.93.15.166 45.93.15.166 RU
109.94.211.139 109.94.211.139 RU
84.54.28.117 84.54.28.117 RU
45.93.12.228 ? RU
45.94.20.171 ? RU
45.147.0.125 ? RU
45.145.169.69 45.145.169.69 RU
185.154.72.12 ? RU
185.142.96.129 holkitsor.mgnhost.ru09 RU
193.233.72.147 vds33015.mgn-host.ru RU
82.202.197.118 ? RU
92.53.64.195 ? RU
92.53.64.196 ? RU
80.68.14.161 161.14.68.80.donpac.ru RU
80.68.15.103 ? RU
82.202.197.231 ? RU
使用者代理字串
Re-re Studio (+http://re-re.ru/)
首次出現
2017-12-04 05:00:38
最後出現
2019-09-07 05:13:27
遵循robots.txt
未知
來源
IP地址(9) 伺服器名稱 所屬國家
185.154.72.12 ? RU
185.142.96.129 holkitsor.mgnhost.ru09 RU
193.233.72.147 vds33015.mgn-host.ru RU
82.202.197.118 ? RU
92.53.64.195 ? RU
92.53.64.196 ? RU
80.68.14.161 161.14.68.80.donpac.ru RU
80.68.15.103 ? RU
82.202.197.231 ? RU
使用者代理字串
7Siters/1.07 (+http://7ooo.ru/siters/)
首次出現
2018-02-17 14:19:57
最後出現
2019-02-01 01:18:24
遵循robots.txt
未知
來源
IP地址(4) 伺服器名稱 所屬國家
80.68.14.161 ? RU
82.202.197.118 82.202.197.118 RU
80.68.15.103 ? RU
82.202.197.231 ? RU
使用者代理字串
7Siters/1.07 (+http://7ooo.ru/siters/)
首次出現
2018-02-17 14:19:57
最後出現
2019-02-01 01:18:24
遵循robots.txt
未知
來源
IP地址(4) 伺服器名稱 所屬國家
80.68.14.161 ? RU
82.202.197.118 82.202.197.118 RU
80.68.15.103 ? RU
82.202.197.231 ? RU
使用者代理字串
777Siters/1.05 (+http://777s.ru/siters/)
首次出現
2017-11-27 10:06:11
最後出現
2017-11-27 10:06:11
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
46.38.62.175 vps.node74.doloremipsum.com RU
80.68.14.161 161.14.68.80.donpac.ru RU

訪問控制

瞭解如何控制Re-re crawler訪問許可權,避免Re-re crawler抓取行為不當。

是否攔截Re-re crawler?

對於未知蜘蛛或者爬蟲。它的用途對網站來說可能是好的,也可能是壞的,這取決於它是什麼。所以說,這需要站長進一步分析判斷這些尚不明確的爬蟲行為,再作最終決定。 但,根據以往的經驗,未宣告行為目的及未命名的蜘蛛爬蟲,通常都有不可告人的祕密,我們理應對其行為進行控制,比如攔截。

通過Robots.txt攔截

您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 Re-re crawler 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛,以檢查它是否真正遵循這些規則。

Plain text
Copy to clipboard
Open code in new window
EnlighterJS 3 Syntax Highlighter
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: Re-re crawler
Disallow: /
# robots.txt # 下列程式碼一般情況可以攔截該代理 User-agent: Re-re crawler Disallow: /
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: Re-re crawler
Disallow: /

您無需手動執行此操作,可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。

常見蜘蛛/爬蟲

Common Spiders
Fraunhofer crawler
Fraunhofer crawler蜘蛛/爬蟲屬於其他型別,由Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Fraunhofer crawler基本資訊,使用者代理和訪問控制等。
companyspotter
companyspotter蜘蛛/爬蟲屬於其他型別,由CompanySpotter BV開發執行。您可以繼續閱讀下方資訊,以深入瞭解companyspotter基本資訊,使用者代理和訪問控制等。
DataForSeo bot
DataForSeo bot蜘蛛/爬蟲屬於其他型別,由DataForSEO OU開發執行。您可以繼續閱讀下方資訊,以深入瞭解DataForSeo bot基本資訊,使用者代理和訪問控制等。
CloudFlare crawler
CloudFlare crawler蜘蛛/爬蟲屬於其他型別,由CloudFlare, Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解CloudFlare crawler基本資訊,使用者代理和訪問控制等。
Odin
Odin蜘蛛/爬蟲屬於其他型別,由Cyble, Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Odin基本資訊,使用者代理和訪問控制等。
Chrome Privacy Preserving Prefetch Proxy
Chrome Privacy Preserving Prefetch Proxy蜘蛛/爬蟲屬於其他型別,由Google Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Chrome Privacy Preserving Prefetch Proxy基本資訊,使用者代理和訪問控制等。
EFF crawler
EFF crawler蜘蛛/爬蟲屬於其他型別,由Electronic Frontier Foundation開發執行。您可以繼續閱讀下方資訊,以深入瞭解EFF crawler基本資訊,使用者代理和訪問控制等。
Modat crawler
Modat crawler蜘蛛/爬蟲屬於其他型別,由Modat B.V.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Modat crawler基本資訊,使用者代理和訪問控制等。

相關文章

Related Articles