k6 crawler

k6 crawler蜘蛛/爬虫属于速度检测类型,由Load Impact AB.开发运行。您可以继续阅读下方信息,以深入了解k6 crawler基本信息,用户代理和访问控制等。

基本信息

k6 crawler的基本信息如下表。但部分不是很规范的蜘蛛和爬虫,可能存在信息不明的情况。
蜘蛛/爬虫名称
k6 crawler
类型
速度检测
开发商
Load Impact AB.
当前状态
活动

用户代理

关于k6 crawler蜘蛛或者爬虫的用户代理字符串,IP地址和服务器,所在地等信息如下表格所示:
k6 cloud
用户代理字符串
k6 cloud (https://k6.io/)
首次出现
2020-10-16 09:05:26
最后出现
2023-01-04 06:23:58
遵循robots.txt
来源
IP地址(11) 服务器名称 所属国家
34.229.190.176 ec2-34-229-190-176.compute-1.amazonaws.com US
34.201.102.58 ec2-34-201-102-58.compute-1.amazonaws.com US
3.80.185.120 ec2-3-80-185-120.compute-1.amazonaws.com US
3.90.21.167 ec2-3-90-21-167.compute-1.amazonaws.com US
34.200.213.12 ec2-34-200-213-12.compute-1.amazonaws.com US

访问控制

了解如何控制k6 crawler访问权限,避免k6 crawler抓取行为不当。

是否拦截k6 crawler?

一般不拦截。此类爬虫通常由诸如Pingdom, Gtmetrix和PageSpeed Insights等网站测速工具发起,且一般为网站所有者所为。

通过Robots.txt拦截

您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 k6 crawler 或限制其访问权限。我们建议安装 Spider Analyser 插件,以检查它是否真正遵循这些规则。

# robots.txt
# 下列代码一般情况可以拦截该代理
User-agent: k6 crawler
Disallow: /

您无需手动执行此操作,可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。

更多信息

k6是一个开源工具和云服务,使开发人员和QA工程师能够轻松进行负载测试。

k6 crawler是k6的网站爬虫,用于执行网站负载测试任务,所以一般情况下只有您使用k6对您的网站执行测试任务的时候,你才有可能在服务器日志看到k6 crawler。

常见蜘蛛/爬虫

Common Spiders

相关文章

Related Articles