Dataprovider Spider
Dataprovider Spider蜘蛛/爬虫属于营销类型,由Dataprovider B.V.开发运行。您可以继续阅读下方信息,以深入了解Dataprovider Spider基本信息,用户代理和访问控制等。
基本信息
Dataprovider Spider的基本信息如下表。但部分不是很规范的蜘蛛和爬虫,可能存在信息不明的情况。
- 蜘蛛/爬虫名称
- Dataprovider Spider
- 类型
- 营销
- 开发商
-
Dataprovider B.V.
- 当前状态
-
活动
用户代理
关于Dataprovider Spider蜘蛛或者爬虫的用户代理字符串,IP地址和服务器,所在地等信息如下表格所示:
Dataprovider
-
Dataprovider
-
Dataprovider
-
Dataprovider
-
Dataprovider/6.101
-
Dataprovider/6.92
-
Lipperhey-Kaus-Australis/5.0
-
Lippershey/5.2
-
Lipperhey Spider
-
Dataprovider Site Explorer
-
Lipperhey Link Explorer
- 用户代理字符串
- Mozilla/5.0 (compatible; Dataprovider.com;)
- 首次出现
- 2016-12-24 11:25:21
- 最后出现
- 2018-09-23 03:45:34
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(10) |
服务器名称 |
所属国家 |
| 167.114.157.79 |
spider-22.lipperhey.com |
CA |
| 192.99.44.141 |
spider-10.lipperhey.com |
CA |
| 167.114.174.95 |
spider-6.lipperhey.com |
CA |
| 158.69.116.77 |
spider-27.lipperhey.com |
CA |
| 158.69.26.193 |
spider-19.lipperhey.com |
CA |
- 用户代理字符串
- Mozilla/5.0 (compatible; Dataprovider; https://www.dataprovider.com/spider/)
- 首次出现
- 2016-11-23 00:02:38
- 最后出现
- 2016-12-16 12:51:22
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(402) |
服务器名称 |
所属国家 |
| 144.217.135.252 |
crawl-144-217-135-252.dataproviderbot.com |
CA |
| 144.217.135.193 |
crawl-144-217-135-193.dataproviderbot.com |
CA |
| 149.56.160.162 |
crawl-149-56-160-162.dataproviderbot.com |
CA |
| 149.56.160.204 |
crawl-149-56-160-204.dataproviderbot.com |
CA |
| 149.56.160.203 |
crawl-149-56-160-203.dataproviderbot.com |
CA |
- 用户代理字符串
- Mozilla/5.0 (compatible; Dataprovider; https://www.dataprovider.com/spider/)
- 首次出现
- 2016-11-23 00:02:38
- 最后出现
- 2016-12-16 12:51:22
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(10) |
服务器名称 |
所属国家 |
| 158.69.225.35 |
spider-13.lipperhey.com |
CA |
| 142.4.218.156 |
spider-5.lipperhey.com |
CA |
| 158.69.225.33 |
spider-11.lipperhey.com |
CA |
| 167.114.172.225 |
spider-7.lipperhey.com |
CA |
| 192.99.44.141 |
spider-10.lipperhey.com |
CA |
- 用户代理字符串
- Mozilla/5.0 (compatible; Dataprovider/6.101; +https://www.dataprovider.com/)
- 首次出现
- 2016-07-30 10:11:59
- 最后出现
- 2016-11-17 16:03:27
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(10) |
服务器名称 |
所属国家 |
| 167.114.172.225 |
spider-7.lipperhey.com |
CA |
| 158.69.225.34 |
spider-12.lipperhey.com |
CA |
| 167.114.209.38 |
spider-2.lipperhey.com |
CA |
| 142.4.218.236 |
spider-4.lipperhey.com |
CA |
| 158.69.225.37 |
spider-15.lipperhey.com |
CA |
- 用户代理字符串
- Mozilla/5.0 (compatible; Dataprovider/6.92; +https://www.dataprovider.com/)
- 首次出现
- 2016-04-21 09:00:00
- 最后出现
- 2016-07-27 15:17:04
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(10) |
服务器名称 |
所属国家 |
| 167.114.209.28 |
spider-1.lipperhey.com |
CA |
| 158.69.225.34 |
spider-12.lipperhey.com |
CA |
| 167.114.209.38 |
spider-2.lipperhey.com |
CA |
| 167.114.65.240 |
spider-16.lipperhey.com |
CA |
| 192.99.44.141 |
spider-10.lipperhey.com |
CA |
- 用户代理字符串
- Mozilla/5.0 (compatible; Lipperhey-Kaus-Australis/5.0; +https://www.lipperhey.com/en/about/)
- 首次出现
- 2015-03-26 16:46:56
- 最后出现
- 2016-04-20 02:02:42
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(10) |
服务器名称 |
所属国家 |
| 158.69.225.33 |
spider-11.lipperhey.com |
CA |
| 192.99.150.97 |
spider-3.lipperhey.com |
CA |
| 167.114.172.225 |
spider-7.lipperhey.com |
CA |
| 158.69.225.34 |
spider-12.lipperhey.com |
CA |
| 167.114.209.28 |
spider-1.lipperhey.com |
CA |
- 用户代理字符串
- Mozilla/5.0 (compatible; Lippershey/5.2; +https://www.lipperhey.com/en/about/)
- 首次出现
- 2016-04-03 07:30:00
- 最后出现
- 2016-04-10 12:48:40
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(8) |
服务器名称 |
所属国家 |
| 167.114.209.38 |
spider-2.lipperhey.com |
CA |
| 167.114.209.28 |
spider-1.lipperhey.com |
CA |
| 192.99.150.97 |
spider-3.lipperhey.com |
CA |
| 167.114.172.225 |
spider-7.lipperhey.com |
CA |
| 167.114.172.223 |
spider-9.lipperhey.com |
CA |
- 用户代理字符串
- Mozilla/5.0 (compatible; Lipperhey SEO Service; http://www.lipperhey.com/)
- 首次出现
- 2014-01-27 16:00:00
- 最后出现
- 2015-03-26 04:13:19
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(56) |
服务器名称 |
所属国家 |
| 82.192.75.55 |
hosted-by.leaseweb.com |
NL |
| 82.192.74.109 |
? |
NL |
| 82.192.75.50 |
82.192.75.50 |
NL |
| 82.192.75.44 |
lw1413.ua-hosting.company |
NL |
| 82.192.70.20 |
82.192.70.20 |
NL |
- 用户代理字符串
- Mozilla/5.0 (compatible; Dataprovider Site Explorer; http://www.dataprovider.com/)
- 首次出现
- 2012-12-09 12:05:25
- 最后出现
- 2013-12-12 01:55:03
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(36) |
服务器名称 |
所属国家 |
| 62.212.77.80 |
? |
NL |
| 62.212.73.82 |
? |
NL |
| 82.192.74.250 |
apc36.tc2.ams.nl.leaseweb.com |
NL |
| 82.192.74.112 |
hosted-by.dahhosting.nl |
NL |
| 82.192.74.115 |
hosted-by.dahhosting.nl |
NL |
- 用户代理字符串
- Mozilla/5.0 (compatible; Lipperhey Link Explorer; http://www.lipperhey.com/)
- 首次出现
- 2015-12-28 07:19:17
- 最后出现
- 2013-06-22 04:45:36
- 遵循robots.txt
- 未知
- 来源
-
| IP地址(1) |
服务器名称 |
所属国家 |
| 195.169.23.136 |
application66.target.rug.nl |
NL |
访问控制
了解如何控制Dataprovider Spider访问权限,避免Dataprovider Spider抓取行为不当。
是否拦截Dataprovider Spider?
一般不需要拦截,尤其是如果你自己也受益于搜索引擎优化服务。不过,如果你担心服务器资源占用等问题,且您都不使用这些工具,当然也可以选择拦截它们。
通过Robots.txt拦截
您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 Dataprovider Spider 或限制其访问权限。我们建议安装 Spider Analyser
插件,以检查它是否真正遵循这些规则。
# robots.txt
# 下列代码一般情况可以拦截该代理
User-agent: Dataprovider Spider
Disallow: /
您无需手动执行此操作,可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。