SCFCrawler
SCFCrawler蜘蛛/爬蟲屬於其他型別，由Matt Burns Ltd開發執行。您可以繼續閱讀下方資訊，以深入瞭解SCFCrawler基本資訊，使用者代理和訪問控制等。
基本資訊
SCFCrawler的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲，可能存在資訊不明的情況。
- 蜘蛛/爬蟲名稱
- SCFCrawler
- 型別
- 其他
- 開發商
-
Matt Burns Ltd
- 當前狀態
-
活動
使用者代理
關於SCFCrawler蜘蛛或者爬蟲的使用者代理字串，IP地址和伺服器，所在地等資訊如下表格所示：
StolenCameraFinder-Discovery/1.16
-
StolenCameraFinder-Discovery/1.16
-
StolenCameraFinder/1.0
-
StolenCameraFinder/1.0
-
StolenCameraFinder/1.0
-
StolenCameraFinder/1.0
-
SCFCrawler
- 使用者代理字串
- StolenCameraFinder-Discovery/1.16 (StolenCameraFinder Discovery Crawler; http://www.stolencamerafinder.com; crawler@stolencamerafinder.com)
- 首次出現
- 2020-07-19 08:11:28
- 最後出現
- 2021-06-21 15:01:42
- 遵循robots.txt
- 未知
- 來源
-
| IP地址(3) |
伺服器名稱 |
所屬國家 |
| 3.91.249.223 |
ec2-3-91-249-223.compute-1.amazonaws.com |
US |
| 54.234.17.57 |
ec2-54-234-17-57.compute-1.amazonaws.com |
US |
| 54.172.155.74 |
ec2-54-172-155-74.compute-1.amazonaws.com |
US |
- 使用者代理字串
- StolenCameraFinder/1.0 (built with StormCrawler 1.15; http://www.stolencamerafinder.com; crawler@stolencamerafinder.com)
- 首次出現
- 2019-10-18 05:47:15
- 最後出現
- 2019-11-12 08:06:01
- 遵循robots.txt
- 未知
- 來源
-
| IP地址(1) |
伺服器名稱 |
所屬國家 |
| 18.234.105.227 |
ec2-18-234-105-227.compute-1.amazonaws.com |
US |
- 使用者代理字串
- StolenCameraFinder/1.0 (built with StormCrawler 1.14; http://www.stolencamerafinder.com; crawler@stolencamerafinder.com)
- 首次出現
- 2019-08-15 11:20:43
- 最後出現
- 2019-08-15 11:20:43
- 遵循robots.txt
- 未知
- 來源
-
| IP地址(1) |
伺服器名稱 |
所屬國家 |
| 35.174.176.35 |
ec2-35-174-176-35.compute-1.amazonaws.com |
US |
- 使用者代理字串
- StolenCameraFinder/1.0 (built with StormCrawler 1.11; http://www.stolencamerafinder.com; crawler@stolencamerafinder.com)
- 首次出現
- 2019-04-13 06:14:57
- 最後出現
- 2019-04-13 06:29:48
- 遵循robots.txt
- 未知
- 來源
-
| IP地址(1) |
伺服器名稱 |
所屬國家 |
| 54.204.201.142 |
ec2-54-204-201-142.compute-1.amazonaws.com |
US |
| 54.196.30.236 |
ec2-54-196-30-236.compute-1.amazonaws.com |
US |
| 54.161.11.12 |
ec2-54-161-11-12.compute-1.amazonaws.com |
US |
| 107.21.85.233 |
ec2-107-21-85-233.compute-1.amazonaws.com |
US |
| 54.221.43.103 |
ec2-54-221-43-103.compute-1.amazonaws.com |
US |
| 3.80.32.226 |
ec2-3-80-32-226.compute-1.amazonaws.com |
US |
| 54.86.252.56 |
ec2-54-86-252-56.compute-1.amazonaws.com |
US |
| 54.226.88.71 |
ec2-54-226-88-71.compute-1.amazonaws.com |
US |
| 54.172.123.139 |
ec2-54-172-123-139.compute-1.amazonaws.com |
US |
| 54.145.33.58 |
ec2-54-145-33-58.compute-1.amazonaws.com |
US |
| 18.234.105.227 |
ec2-18-234-105-227.compute-1.amazonaws.com |
US |
| 35.174.176.35 |
ec2-35-174-176-35.compute-1.amazonaws.com |
US |
| 54.145.239.6 |
ec2-54-145-239-6.compute-1.amazonaws.com |
US |
- 使用者代理字串
- StolenCameraFinder/1.0 (built with StormCrawler 1.11; http://www.stolencamerafinder.com; crawler@stolencamerafinder.com)
- 首次出現
- 2019-04-13 06:14:57
- 最後出現
- 2019-04-13 06:29:48
- 遵循robots.txt
- 未知
- 來源
-
| IP地址(1) |
伺服器名稱 |
所屬國家 |
| 54.145.239.6 |
ec2-54-145-239-6.compute-1.amazonaws.com |
US |
- 使用者代理字串
- SCFCrawler/Nutch-1.8 (Image Crawler for StolenCameraFinder.com; http://www.stolencamerafinder.com/; crawler@stolencamerafinder.com)
- 首次出現
- 2014-06-22 09:00:00
- 最後出現
- 2014-07-03 13:49:15
- 遵循robots.txt
- 未知
- 來源
-
| IP地址(4) |
伺服器名稱 |
所屬國家 |
| 23.20.76.170 |
ec2-23-20-76-170.compute-1.amazonaws.com |
US |
| 54.196.216.9 |
ec2-54-196-216-9.compute-1.amazonaws.com |
US |
| 54.205.125.74 |
ec2-54-205-125-74.compute-1.amazonaws.com |
US |
| 54.198.50.20 |
ec2-54-198-50-20.compute-1.amazonaws.com |
US |
訪問控制
瞭解如何控制SCFCrawler訪問許可權，避免SCFCrawler抓取行為不當。
是否攔截SCFCrawler？
對於未知蜘蛛或者爬蟲。它的用途對網站來說可能是好的，也可能是壞的，這取決於它是什麼。所以說，這需要站長進一步分析判斷這些尚不明確的爬蟲行為，再作最終決定。
但，根據以往的經驗，未宣告行為目的及未命名的蜘蛛爬蟲，通常都有不可告人的祕密，我們理應對其行為進行控制，比如攔截。
通過Robots.txt攔截
您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 SCFCrawler 或限制其訪問許可權。我們建議安裝 Spider Analyser
外掛，以檢查它是否真正遵循這些規則。
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: SCFCrawler
Disallow: /
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: SCFCrawler
Disallow: /
您無需手動執行此操作，可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。
