memoryBot

memoryBot蜘蛛/爬蟲屬於其他型別,由Internet Memory Research開發執行。您可以繼續閱讀下方資訊,以深入瞭解memoryBot基本資訊,使用者代理和訪問控制等。

基本資訊

memoryBot的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲,可能存在資訊不明的情況。
蜘蛛/爬蟲名稱
memoryBot
型別
其他
開發商
Internet Memory Research
當前狀態
活動

使用者代理

關於memoryBot蜘蛛或者爬蟲的使用者代理字串,IP地址和伺服器,所在地等資訊如下表格所示:
memoryBot/1.24.61
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.24.61 +http://internetmemory.org/en/)
首次出現
2016-12-28 23:54:10
最後出現
2017-01-31 16:52:18
遵循robots.txt
來源
IP地址(8) 伺服器名稱 所屬國家
37.16.72.211 im119.internetmemory.org FR
37.16.73.17 ? FR
37.16.73.16 ? FR
37.16.72.210 im118.internetmemory.org FR
37.16.72.213 im121.internetmemory.org FR
37.16.72.123 im31.internetmemory.org FR
37.16.72.209 im117.internetmemory.org FR
37.16.72.229 imr28.internetmemory.org FR
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.24.54 +http://internetmemory.org/en/)
首次出現
2016-12-25 03:59:16
最後出現
2016-12-26 15:15:47
遵循robots.txt
未知
來源
IP地址(3) 伺服器名稱 所屬國家
37.16.72.123 ? FR
37.16.72.229 imr28.internetmemory.org FR
37.16.72.210 im118.internetmemory.org FR
使用者代理字串
Mozilla/5.0 (compatible; memorybot/1.24.12 +https://internetmemory.net/en/bots)
首次出現
2016-05-15 10:55:00
最後出現
2016-05-16 09:06:19
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
37.16.72.209 im117.internetmemory.org FR
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.24.11 +http://internetmemory.org/en/)
首次出現
2015-12-07 15:10:00
最後出現
2015-12-07 10:55:05
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
37.16.72.210 im118.internetmemory.org FR
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.21.14 +http://mignify.com/bot.html)
首次出現
2014-12-17 13:05:00
最後出現
2015-02-14 15:26:45
遵循robots.txt
未知
來源
IP地址(8) 伺服器名稱 所屬國家
37.16.72.123 im31.internetmemory.org FR
37.16.72.208 im116.internetmemory.org FR
37.16.72.211 im119.internetmemory.org FR
37.16.72.128 im36.internetmemory.org FR
37.16.72.126 im34.internetmemory.org FR
37.16.72.209 im117.internetmemory.org FR
37.16.72.127 im35.internetmemory.org FR
37.16.72.210 im118.internetmemory.org FR
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.21.46 +http://internetmemory.org/en/)
首次出現
2015-02-04 21:58:59
最後出現
2015-02-07 14:54:32
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
37.16.72.219 imr18.internetmemory.org AT
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.21.24 +http://internetmemory.org/en/)
首次出現
2014-12-30 08:15:00
最後出現
2015-01-29 13:43:27
遵循robots.txt
未知
來源
IP地址(3) 伺服器名稱 所屬國家
194.187.168.2 194.187.168.2 PL
194.187.168.3 194.187.168.3 PL
194.187.168.4 194.187.168.4 PL
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.21.23 +http://internetmemory.org/en/)
首次出現
2014-12-20 03:40:00
最後出現
2014-12-20 07:39:47
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
194.187.168.4 194.187.168.4 PL
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.21.16 +http://internetmemory.org/en/)
首次出現
2014-12-18 17:50:00
最後出現
2014-12-18 22:51:22
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
194.187.168.4 194.187.168.4 PL
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.20.311 +http://internetmemory.org/en/)
首次出現
2014-12-02 20:50:00
最後出現
2014-12-06 11:58:28
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
37.16.72.200 imr9.internetmemory.org FR
37.16.72.201 imr10.internetmemory.org FR
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.20.289 +http://internetmemory.org/en/)
首次出現
2014-11-01 14:40:00
最後出現
2014-11-07 06:05:58
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
194.187.168.1 194.187.168.1 PL
194.187.168.3 194.187.168.3 PL
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.20.275 +http://internetmemory.org/en/)
首次出現
2014-10-31 05:15:00
最後出現
2014-10-30 17:46:32
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
91.242.162.100 91.242.162.100 FR
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.20.268 +http://internetmemory.org/en/)
首次出現
2014-10-30 08:30:00
最後出現
2014-10-29 21:29:35
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
91.242.162.100 91.242.162.100 FR
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.20.247 +http://internetmemory.org/en/)
首次出現
2014-10-23 15:25:46
最後出現
2014-10-28 12:29:24
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
91.242.162.100 91.242.162.100 FR
使用者代理字串
Mozilla/5.0 (compatible; imrbot/1.10.8 +http://www.mignify.com)
首次出現
2013-08-09 23:10:41
最後出現
2014-10-24 03:11:30
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
37.16.72.114 im22.internetmemory.org FR
37.16.72.136 im44.internetmemory.org FR
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.20.243 +http://internetmemory.org/en/)
首次出現
2014-10-23 12:00:00
最後出現
2014-10-23 11:16:48
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
91.242.162.100 91.242.162.100 FR
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.20.241 +http://internetmemory.org/en/)
首次出現
2014-10-22 11:59:07
最後出現
2014-10-22 11:59:08
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
91.242.162.100 91.242.162.100 FR
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.20.235 +http://internetmemory.org/en/)
首次出現
2014-10-18 09:01:00
最後出現
2014-10-18 14:01:32
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
91.242.162.100 91.242.162.100 FR
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.20.210 +http://internetmemory.org/en/)
首次出現
2014-10-14 08:15:00
最後出現
2014-10-16 19:44:02
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
91.242.162.100 91.242.162.100 FR
使用者代理字串
Mozilla/5.0 (compatible; memoryBot/1.20.199 +http://internetmemory.org/en/)
首次出現
2014-10-09 08:15:00
最後出現
2014-10-12 04:00:48
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
91.242.162.100 91.242.162.100 FR
使用者代理字串
Mozilla/5.0 (compatible; memorybot/1.20.71 +http://archivethe.net/en/index.php/about/internet_memory1 on behalf of DNB)
首次出現
2014-06-09 00:25:27
最後出現
2014-06-24 17:42:57
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
37.16.72.128 im36.internetmemory.org FR
37.16.72.211 im119.internetmemory.org FR
使用者代理字串
Mozilla/5.0 (compatible; imbot/0.1 +http://internetmemory.org/en/
首次出現
2012-02-23 18:56:47
最後出現
2012-02-25 03:43:05
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
37.16.72.13 im1a3.internetmemory.org FR
使用者代理字串
Mozilla/5.0 (compatible; imbot/0.1 +http://internetmemory.org/en/
首次出現
2012-02-23 18:56:47
最後出現
2012-02-25 03:43:05
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
37.16.72.13 im1a3.internetmemory.org FR

訪問控制

瞭解如何控制memoryBot訪問許可權,避免memoryBot抓取行為不當。

是否攔截memoryBot?

對於未知蜘蛛或者爬蟲。它的用途對網站來說可能是好的,也可能是壞的,這取決於它是什麼。所以說,這需要站長進一步分析判斷這些尚不明確的爬蟲行為,再作最終決定。 但,根據以往的經驗,未宣告行為目的及未命名的蜘蛛爬蟲,通常都有不可告人的祕密,我們理應對其行為進行控制,比如攔截。

通過Robots.txt攔截

您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 memoryBot 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛,以檢查它是否真正遵循這些規則。

Plain text
Copy to clipboard
Open code in new window
EnlighterJS 3 Syntax Highlighter
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: memoryBot
Disallow: /
# robots.txt # 下列程式碼一般情況可以攔截該代理 User-agent: memoryBot Disallow: /
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: memoryBot
Disallow: /

您無需手動執行此操作,可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。

常見蜘蛛/爬蟲

Common Spiders
Fraunhofer crawler
Fraunhofer crawler蜘蛛/爬蟲屬於其他型別,由Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Fraunhofer crawler基本資訊,使用者代理和訪問控制等。
companyspotter
companyspotter蜘蛛/爬蟲屬於其他型別,由CompanySpotter BV開發執行。您可以繼續閱讀下方資訊,以深入瞭解companyspotter基本資訊,使用者代理和訪問控制等。
DataForSeo bot
DataForSeo bot蜘蛛/爬蟲屬於其他型別,由DataForSEO OU開發執行。您可以繼續閱讀下方資訊,以深入瞭解DataForSeo bot基本資訊,使用者代理和訪問控制等。
CloudFlare crawler
CloudFlare crawler蜘蛛/爬蟲屬於其他型別,由CloudFlare, Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解CloudFlare crawler基本資訊,使用者代理和訪問控制等。
Odin
Odin蜘蛛/爬蟲屬於其他型別,由Cyble, Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Odin基本資訊,使用者代理和訪問控制等。
Chrome Privacy Preserving Prefetch Proxy
Chrome Privacy Preserving Prefetch Proxy蜘蛛/爬蟲屬於其他型別,由Google Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Chrome Privacy Preserving Prefetch Proxy基本資訊,使用者代理和訪問控制等。
EFF crawler
EFF crawler蜘蛛/爬蟲屬於其他型別,由Electronic Frontier Foundation開發執行。您可以繼續閱讀下方資訊,以深入瞭解EFF crawler基本資訊,使用者代理和訪問控制等。
Modat crawler
Modat crawler蜘蛛/爬蟲屬於其他型別,由Modat B.V.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Modat crawler基本資訊,使用者代理和訪問控制等。

相關文章

Related Articles