Prerender

Prerender蜘蛛/爬虫属于工具类型,由Saas.group LLC开发运行。您可以继续阅读下方信息,以深入了解Prerender基本信息,用户代理和访问控制等。

基本信息

Prerender的基本信息如下表。但部分不是很规范的蜘蛛和爬虫,可能存在信息不明的情况。
蜘蛛/爬虫名称
Prerender
类型
工具
开发商
Saas.group LLC
当前状态
活动

用户代理

关于Prerender蜘蛛或者爬虫的用户代理字符串,IP地址和服务器,所在地等信息如下表格所示:
Prerender
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) HeadlessChrome/97.0.4692.99 Safari/537.36 Prerender (+https://github.com/prerender/prerender)
首次出现
2022-06-19 15:06:14
最后出现
2022-08-27 18:16:21
遵循robots.txt
未知
来源
IP地址(6) 服务器名称 所属国家
51.81.93.117 vhf-k8s-b11.node.prerender.io US
135.148.54.17 vhf-k8s-b17.node.prerender.io US
51.81.47.43 vhf-k8s-b1.node.prerender.io US
135.148.55.151 vhf-k8s-b15.node.prerender.io ?
51.81.47.17 vhf-k8s-b2.node.prerender.io ?
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) HeadlessChrome/98.0.4758.80 Safari/537.36 Prerender (+https://github.com/prerender/prerender)
首次出现
2022-02-16 09:30:58
最后出现
2022-07-16 12:34:15
遵循robots.txt
来源
IP地址(10) 服务器名称 所属国家
104.224.13.61 us-mci1-p61.renders.prerender.io US
159.69.172.179 fi-hel1-9f45acb3.renders.prerender.io DE
157.90.99.7 de-fsn1-9d5a6307.renders.prerender.io DE
104.224.14.13 us-ogd1-p13.renders.prerender.io US
188.34.148.144 de-fsn1-bc229490.renders.prerender.io DE
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) HeadlessChrome/89.0.4389.72 Safari/537.36 Prerender (+https://github.com/prerender/prerender)
首次出现
2022-02-28 13:00:55
最后出现
2022-02-28 13:00:55
遵循robots.txt
未知
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) HeadlessChrome/61.0.3159.5 Safari/537.36 Prerender (+https://github.com/prerender/prerender)
首次出现
2021-04-13 16:12:35
最后出现
2021-04-13 16:12:35
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
80.110.106.215 80-110-106-215.cgn.dynamic.surfer.at AT
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) HeadlessChrome/84.0.4147.89 Safari/537.36 Prerender (+https://github.com/prerender/prerender)
首次出现
2020-08-24 10:52:50
最后出现
2021-03-05 10:44:34
遵循robots.txt
来源
IP地址(10) 服务器名称 所属国家
104.224.14.99 us-ogd1-p99.renders.prerender.io BB
104.224.14.75 us-ogd1-p75.renders.prerender.io BB
104.224.14.70 us-ogd1-p70.renders.prerender.io BB
188.34.149.17 fi-hel1-p17.renders.prerender.io IR
2a01:4f8:13b:4194::2 de-fsn1-9.renders.prerender.io DE
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) HeadlessChrome/66.0.3359.170 Safari/537.36 Prerender (+https://github.com/prerender/prerender)
首次出现
2019-10-15 08:35:28
最后出现
2021-02-09 06:35:07
遵循robots.txt
来源
IP地址(10) 服务器名称 所属国家
52.90.149.131 ec2-52-90-149-131.compute-1.amazonaws.com US
3.94.101.50 ec2-3-94-101-50.compute-1.amazonaws.com US
3.82.55.220 ec2-3-82-55-220.compute-1.amazonaws.com US
52.207.88.31 ec2-52-207-88-31.compute-1.amazonaws.com US
3.85.130.208 ec2-3-85-130-208.compute-1.amazonaws.com US
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) HeadlessChrome/68.0.3440.106 Safari/537.36 Prerender (+https://github.com/prerender/prerender)
首次出现
2020-12-09 19:03:04
最后出现
2020-12-09 19:03:04
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
159.69.184.126 static.126.184.69.159.clients.your-server.de DE
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) HeadlessChrome/83.0.4103.116 Safari/537.36 Prerender (+https://github.com/prerender/prerender)
首次出现
2020-11-02 10:39:34
最后出现
2020-11-02 10:39:34
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
212.89.8.82 listas.fundacionctic.org ES
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) HeadlessChrome/71.0.3578.98 Safari/537.36 Prerender (+https://github.com/prerender/prerender)
首次出现
2020-05-12 16:00:32
最后出现
2020-09-07 15:04:56
遵循robots.txt
来源
IP地址(10) 服务器名称 所属国家
173.231.62.75 173-231-62-75.static.webnx.com US
173.231.62.69 173-231-62-69.static.webnx.com US
46.4.66.240 de-fsn1-19.renders.prerender.io DE
46.4.62.118 de-fsn1-23.renders.prerender.io DE
2a01:4f8:120:218b::2 de-fsn1-32.renders.prerender.io DE
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) HeadlessChrome/71.0.3578.80 Safari/537.36 Prerender (+https://github.com/prerender/prerender)
首次出现
2020-01-18 10:21:23
最后出现
2020-05-07 09:22:54
遵循robots.txt
来源
IP地址(10) 服务器名称 所属国家
54.167.22.94 ec2-54-167-22-94.compute-1.amazonaws.com US
54.144.221.39 ec2-54-144-221-39.compute-1.amazonaws.com US
3.81.127.155 ec2-3-81-127-155.compute-1.amazonaws.com US
54.243.17.185 ec2-54-243-17-185.compute-1.amazonaws.com US
54.85.200.255 ec2-54-85-200-255.compute-1.amazonaws.com US
用户代理字符串
Mozilla/5.0 (Unknown; Linux x86_64) AppleWebKit/538.1 (KHTML, like Gecko) PhantomJS/2.1.1 Safari/538.1 Prerender (+https://github.com/prerender/prerender)
首次出现
2016-05-28 10:19:52
最后出现
2020-01-13 11:31:32
遵循robots.txt
来源
IP地址(10) 服务器名称 所属国家
54.204.132.250 ec2-54-204-132-250.compute-1.amazonaws.com US
54.158.97.26 ec2-54-158-97-26.compute-1.amazonaws.com US
54.211.135.148 ec2-54-211-135-148.compute-1.amazonaws.com US
54.167.51.161 ec2-54-167-51-161.compute-1.amazonaws.com US
54.234.133.129 ec2-54-234-133-129.compute-1.amazonaws.com US
用户代理字符串
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) HeadlessChrome/61.0.3163.59 Safari/537.36 Prerender (+https://github.com/prerender/prerender)
首次出现
2018-07-30 11:01:47
最后出现
2018-09-18 11:45:35
遵循robots.txt
未知
来源
IP地址(2) 服务器名称 所属国家
18.232.178.62 ec2-18-232-178-62.compute-1.amazonaws.com US
54.236.240.102 ec2-54-236-240-102.compute-1.amazonaws.com US
用户代理字符串
Mozilla/5.0 (Unknown; Linux x86_64) AppleWebKit/534.34 (KHTML, like Gecko) PhantomJS/1.9.8 Safari/534.34 Prerender (+https://github.com/prerender/prerender)
首次出现
2016-01-28 11:12:43
最后出现
2016-01-28 11:12:43
遵循robots.txt
来源
IP地址(567) 服务器名称 所属国家
159.69.172.182 fi-hel1-9f45acb6.renders.prerender.io DE
157.90.99.20 de-fsn1-9d5a6314.renders.prerender.io DE
104.224.13.75 us-mci1-p75.renders.prerender.io US
157.90.99.6 de-fsn1-9d5a6306.renders.prerender.io DE
168.119.133.84 fi-hel1-a8778554.renders.prerender.io DE
用户代理字符串
Mozilla/5.0 (Unknown; Linux x86_64) AppleWebKit/534.34 (KHTML, like Gecko) PhantomJS/1.9.8 Safari/534.34 Prerender (+https://github.com/prerender/prerender)
首次出现
2016-01-28 11:12:43
最后出现
2016-01-28 11:12:43
遵循robots.txt
未知
来源
IP地址(2) 服务器名称 所属国家
159.203.71.65 ? US
185.30.97.26 ? RU

访问控制

了解如何控制Prerender访问权限,避免Prerender抓取行为不当。

是否拦截Prerender?

可能不需要。工具类型爬虫通常为网站所有者使用此类工具对网站进行相关服务请求才会出现。当然,实际情况需站长判断后再作决定。

通过Robots.txt拦截

您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 Prerender 或限制其访问权限。我们建议安装 Spider Analyser 插件,以检查它是否真正遵循这些规则。

# robots.txt
# 下列代码一般情况可以拦截该代理
User-agent: Prerender
Disallow: /

您无需手动执行此操作,可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。

常见蜘蛛/爬虫

Common Spiders

相关文章

Related Articles