Dataprovider Spider

Dataprovider Spider蜘蛛/爬虫属于营销类型,由Dataprovider B.V.开发运行。您可以继续阅读下方信息,以深入了解Dataprovider Spider基本信息,用户代理和访问控制等。

基本信息

Dataprovider Spider的基本信息如下表。但部分不是很规范的蜘蛛和爬虫,可能存在信息不明的情况。
蜘蛛/爬虫名称
Dataprovider Spider
类型
营销
开发商
Dataprovider B.V.
当前状态
活动

用户代理

关于Dataprovider Spider蜘蛛或者爬虫的用户代理字符串,IP地址和服务器,所在地等信息如下表格所示:
Dataprovider
用户代理字符串
Mozilla/5.0 (compatible; Dataprovider.com;)
首次出现
2016-12-24 11:25:21
最后出现
2018-09-23 03:45:34
遵循robots.txt
未知
来源
IP地址(10) 服务器名称 所属国家
167.114.157.79 spider-22.lipperhey.com CA
192.99.44.141 spider-10.lipperhey.com CA
167.114.174.95 spider-6.lipperhey.com CA
158.69.116.77 spider-27.lipperhey.com CA
158.69.26.193 spider-19.lipperhey.com CA
用户代理字符串
Mozilla/5.0 (compatible; Dataprovider; https://www.dataprovider.com/spider/)
首次出现
2016-11-23 00:02:38
最后出现
2016-12-16 12:51:22
遵循robots.txt
未知
来源
IP地址(402) 服务器名称 所属国家
144.217.135.252 crawl-144-217-135-252.dataproviderbot.com CA
144.217.135.193 crawl-144-217-135-193.dataproviderbot.com CA
149.56.160.162 crawl-149-56-160-162.dataproviderbot.com CA
149.56.160.204 crawl-149-56-160-204.dataproviderbot.com CA
149.56.160.203 crawl-149-56-160-203.dataproviderbot.com CA
用户代理字符串
Mozilla/5.0 (compatible; Dataprovider; https://www.dataprovider.com/spider/)
首次出现
2016-11-23 00:02:38
最后出现
2016-12-16 12:51:22
遵循robots.txt
未知
来源
IP地址(10) 服务器名称 所属国家
158.69.225.35 spider-13.lipperhey.com CA
142.4.218.156 spider-5.lipperhey.com CA
158.69.225.33 spider-11.lipperhey.com CA
167.114.172.225 spider-7.lipperhey.com CA
192.99.44.141 spider-10.lipperhey.com CA
用户代理字符串
Mozilla/5.0 (compatible; Dataprovider/6.101; +https://www.dataprovider.com/)
首次出现
2016-07-30 10:11:59
最后出现
2016-11-17 16:03:27
遵循robots.txt
未知
来源
IP地址(10) 服务器名称 所属国家
167.114.172.225 spider-7.lipperhey.com CA
158.69.225.34 spider-12.lipperhey.com CA
167.114.209.38 spider-2.lipperhey.com CA
142.4.218.236 spider-4.lipperhey.com CA
158.69.225.37 spider-15.lipperhey.com CA
用户代理字符串
Mozilla/5.0 (compatible; Dataprovider/6.92; +https://www.dataprovider.com/)
首次出现
2016-04-21 09:00:00
最后出现
2016-07-27 15:17:04
遵循robots.txt
未知
来源
IP地址(10) 服务器名称 所属国家
167.114.209.28 spider-1.lipperhey.com CA
158.69.225.34 spider-12.lipperhey.com CA
167.114.209.38 spider-2.lipperhey.com CA
167.114.65.240 spider-16.lipperhey.com CA
192.99.44.141 spider-10.lipperhey.com CA
用户代理字符串
Mozilla/5.0 (compatible; Lipperhey-Kaus-Australis/5.0; +https://www.lipperhey.com/en/about/)
首次出现
2015-03-26 16:46:56
最后出现
2016-04-20 02:02:42
遵循robots.txt
未知
来源
IP地址(10) 服务器名称 所属国家
158.69.225.33 spider-11.lipperhey.com CA
192.99.150.97 spider-3.lipperhey.com CA
167.114.172.225 spider-7.lipperhey.com CA
158.69.225.34 spider-12.lipperhey.com CA
167.114.209.28 spider-1.lipperhey.com CA
用户代理字符串
Mozilla/5.0 (compatible; Lippershey/5.2; +https://www.lipperhey.com/en/about/)
首次出现
2016-04-03 07:30:00
最后出现
2016-04-10 12:48:40
遵循robots.txt
未知
来源
IP地址(8) 服务器名称 所属国家
167.114.209.38 spider-2.lipperhey.com CA
167.114.209.28 spider-1.lipperhey.com CA
192.99.150.97 spider-3.lipperhey.com CA
167.114.172.225 spider-7.lipperhey.com CA
167.114.172.223 spider-9.lipperhey.com CA
用户代理字符串
Mozilla/5.0 (compatible; Lipperhey SEO Service; http://www.lipperhey.com/)
首次出现
2014-01-27 16:00:00
最后出现
2015-03-26 04:13:19
遵循robots.txt
未知
来源
IP地址(56) 服务器名称 所属国家
82.192.75.55 hosted-by.leaseweb.com NL
82.192.74.109 ? NL
82.192.75.50 82.192.75.50 NL
82.192.75.44 lw1413.ua-hosting.company NL
82.192.70.20 82.192.70.20 NL
用户代理字符串
Mozilla/5.0 (compatible; Dataprovider Site Explorer; http://www.dataprovider.com/)
首次出现
2012-12-09 12:05:25
最后出现
2013-12-12 01:55:03
遵循robots.txt
未知
来源
IP地址(36) 服务器名称 所属国家
62.212.77.80 ? NL
62.212.73.82 ? NL
82.192.74.250 apc36.tc2.ams.nl.leaseweb.com NL
82.192.74.112 hosted-by.dahhosting.nl NL
82.192.74.115 hosted-by.dahhosting.nl NL
用户代理字符串
Mozilla/5.0 (compatible; Lipperhey Link Explorer; http://www.lipperhey.com/)
首次出现
2015-12-28 07:19:17
最后出现
2013-06-22 04:45:36
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
195.169.23.136 application66.target.rug.nl NL

访问控制

了解如何控制Dataprovider Spider访问权限,避免Dataprovider Spider抓取行为不当。

是否拦截Dataprovider Spider?

一般不需要拦截,尤其是如果你自己也受益于搜索引擎优化服务。不过,如果你担心服务器资源占用等问题,且您都不使用这些工具,当然也可以选择拦截它们。

通过Robots.txt拦截

您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 Dataprovider Spider 或限制其访问权限。我们建议安装 Spider Analyser 插件,以检查它是否真正遵循这些规则。

# robots.txt
# 下列代码一般情况可以拦截该代理
User-agent: Dataprovider Spider
Disallow: /

您无需手动执行此操作,可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。

常见蜘蛛/爬虫

Common Spiders
RidderBot
RidderBot蜘蛛/爬虫属于营销类型,由Ridder开发运行。您可以继续阅读下方信息,以深入了解RidderBot基本信息,用户代理和访问控制等。
Upsales bot
Upsales bot蜘蛛/爬虫属于营销类型,由Upsales Nordic AB开发运行。您可以继续阅读下方信息,以深入了解Upsales bot基本信息,用户代理和访问控制等。
HealRWorld
HealRWorld蜘蛛/爬虫属于营销类型,由HealRWorld LLC.开发运行。您可以继续阅读下方信息,以深入了解HealRWorld基本信息,用户代理和访问控制等。
Scope3
Scope3蜘蛛/爬虫属于营销类型,由Scope3, PBC.开发运行。您可以继续阅读下方信息,以深入了解Scope3基本信息,用户代理和访问控制等。
MercuryLeads/1.0
MercuryLeads/1.0蜘蛛/爬虫属于营销类型,由Mercury Leads开发运行。您可以继续阅读下方信息,以深入了解MercuryLeads/1.0基本信息,用户代理和访问控制等。
mediaboardbot
mediaboardbot蜘蛛/爬虫属于营销类型,由Mediaboard s.r.o.开发运行。您可以继续阅读下方信息,以深入了解mediaboardbot基本信息,用户代理和访问控制等。
HaloScan bot
HaloScan bot蜘蛛/爬虫属于营销类型,由ARCHI301开发运行。您可以继续阅读下方信息,以深入了解HaloScan bot基本信息,用户代理和访问控制等。
Matchory Bot
Matchory Bot蜘蛛/爬虫属于营销类型,由Matchory GmbH开发运行。您可以继续阅读下方信息,以深入了解Matchory Bot基本信息,用户代理和访问控制等。

相关文章

Related Articles