Spinn3r

基本信息

Spinn3r的基本信息如下表。但部分不是很规范的蜘蛛和爬虫，可能存在信息不明的情况。

用户代理

关于Spinn3r蜘蛛或者爬虫的用户代理字符串，IP地址和服务器，所在地等信息如下表格所示：

用户代理字符串: Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.2.1; aggregator:Spinn3r (Spinn3r 3.1); http://spinn3r.com/robot) Gecko/20021130

来源

IP地址(11)	服务器名称	所属国家
64.19.78.243	64.19.78.243	US
174.37.205.85	174-37-205-85.robot.spinn3r.com	US
173.192.238.40	173-192-238-40.robot.spinn3r.com	US
174.36.228.157	9d.e4.24ae.ip4.static.sl-reverse.com	US
174.37.205.87	174-37-205-87.robot.spinn3r.com	US
173.192.238.41	173-192-238-41.robot.spinn3r.com	US
174.36.241.148	174-36-241-148.robot.spinn3r.com	US
174.37.205.92	174-37-205-92.robot.spinn3r.com	US
173.192.238.43	173-192-238-43.robot.spinn3r.com	US
174.36.241.149	174-36-241-149.robot.spinn3r.com	US
174.36.241.155	174-36-241-155.robot.spinn3r.com	US
173.192.238.58	spinn3r.com	US
174.37.205.71	174-37-205-71.robot.spinn3r.com	US
174.36.228.156	174-36-228-156.robot.spinn3r.com	US
174.36.241.157	174-36-241-157.robot.spinn3r.com	US
173.192.238.37	173-192-238-37.robot.spinn3r.com	US
173.192.238.48	30.ee.c0ad.ip4.static.sl-reverse.com	US
174.37.205.67	174-37-205-67.robot.spinn3r.com	US
174.37.205.76	174-37-205-76.robot.spinn3r.com	US
174.36.228.154	174-36-228-154.robot.spinn3r.com	US
174.36.228.155	174-36-228-155.robot.spinn3r.com	US
174.36.241.156	174-36-241-156.robot.spinn3r.com	US
173.192.238.45	173-192-238-45.robot.spinn3r.com	US
173.192.238.51	173-192-238-51.robot.spinn3r.com	US
173.192.238.57	spinn3r.com	US
173.192.238.34	22.ee.c0ad.ip4.static.sl-reverse.com	US

用户代理字符串: Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.2.1; aggregator:Spinn3r (Spinn3r 3.1); http://spinn3r.com/robot) Gecko/20021130

来源

访问控制

了解如何控制Spinn3r访问权限，避免Spinn3r抓取行为不当。

可以考虑拦截。。爬虫通常会下载公开的互联网内容，这些内容默认情况下可以免费访问。不过，如果你不希望你的内容被用于未经授权的目的，你应该拦截它们。

您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 Spinn3r 或限制其访问权限。我们建议安装 Spider Analyser 插件，以检查它是否真正遵循这些规则。

	# robots.txt
	# 下列代码一般情况可以拦截该代理
	
	User-agent: Spinn3r
	Disallow: /

您无需手动执行此操作，可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。

基本信息