Ant.com bot

Ant.com bot蜘蛛/爬虫属于搜索引擎类型,由Ant.com Ltd开发运行。您可以继续阅读下方信息,以深入了解Ant.com bot基本信息,用户代理和访问控制等。

基本信息

Ant.com bot的基本信息如下表。但部分不是很规范的蜘蛛和爬虫,可能存在信息不明的情况。
蜘蛛/爬虫名称
Ant.com bot
类型
搜索引擎
开发商
Ant.com Ltd
当前状态
活动

用户代理

关于Ant.com bot蜘蛛或者爬虫的用户代理字符串,IP地址和服务器,所在地等信息如下表格所示:
Ant.com beta/1.0
用户代理字符串
Ant.com beta/1.0 (Crawling antmarks; https://www.ant.com; admin@ant.com)
首次出现
2018-10-21 07:03:24
最后出现
2023-02-01 22:01:14
遵循robots.txt
来源
IP地址(1) 服务器名称 所属国家
185.120.68.164 185.120.68.164 CZ
用户代理字符串
Ant.com/1.0 (Crawling antmarks; https://www.ant.com; admin@ant.com)
首次出现
2017-11-07 05:14:50
最后出现
2017-11-07 05:14:50
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
185.120.68.164 185.120.68.164 CZ
用户代理字符串
Mozilla/5.0 (compatible; AntBot/1.0; +http://www.ant.com/)
首次出现
2010-11-10 22:08:59
最后出现
2011-01-06 16:26:50
遵循robots.txt
未知
来源
IP地址(6) 服务器名称 所属国家
83.149.125.220 hosted-by.leaseweb.com NL
69.55.58.106 69.55.58.106 US
69.55.58.107 69.55.58.107 US
69.55.58.108 69.55.58.108 US
69.55.58.102 69.55.58.102 US
69.55.58.103 69.55.58.103 US
69.55.58.105 69.55.58.105 US
用户代理字符串
Ant/Ant-Nutch-1.1 (Ant Nutch Crawler; http://www.ant.com; crawler@ant.com)
首次出现
2010-08-03 02:52:04
最后出现
2010-09-16 07:38:02
遵循robots.txt
未知
来源
IP地址(8) 服务器名称 所属国家
83.149.125.220 hosted-by.leaseweb.com NL
69.55.58.103 69.55.58.103 US
69.55.58.105 69.55.58.105 US
69.55.58.107 69.55.58.107 US
69.55.58.104 69.55.58.104 US
69.55.58.106 69.55.58.106 US
69.55.58.108 69.55.58.108 US
69.55.58.101 69.55.58.101 US
69.55.58.102 69.55.58.102 US

访问控制

了解如何控制Ant.com bot访问权限,避免Ant.com bot抓取行为不当。

是否拦截Ant.com bot?

一般不要拦截。搜索引擎爬虫为搜索引擎提供动力,是用户发现您网站的有效途径。事实上,拦截搜索引擎爬虫可能会严重减少网站的自然流量。

通过Robots.txt拦截

您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 Ant.com bot 或限制其访问权限。我们建议安装 Spider Analyser 插件,以检查它是否真正遵循这些规则。

Plain text
Copy to clipboard
Open code in new window
EnlighterJS 3 Syntax Highlighter
# robots.txt
# 下列代码一般情况可以拦截该代理
User-agent: Ant.com bot
Disallow: /
# robots.txt # 下列代码一般情况可以拦截该代理 User-agent: Ant.com bot Disallow: /
# robots.txt
# 下列代码一般情况可以拦截该代理
User-agent: Ant.com bot
Disallow: /

您无需手动执行此操作,可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。

常见蜘蛛/爬虫

Common Spiders
Mithril
Mithril蜘蛛/爬虫属于搜索引擎类型,由University of Michigan开发运行。您可以继续阅读下方信息,以深入了解Mithril基本信息,用户代理和访问控制等。
fynd.bot crawler
fynd.bot crawler蜘蛛/爬虫属于搜索引擎类型,由fynd.bot开发运行。您可以继续阅读下方信息,以深入了解fynd.bot crawler基本信息,用户代理和访问控制等。
Alibaba crawler
Alibaba crawler蜘蛛/爬虫属于搜索引擎类型,由Alibaba Group开发运行。您可以继续阅读下方信息,以深入了解Alibaba crawler基本信息,用户代理和访问控制等。
Googlebot
GoogleBot蜘蛛/爬虫属于搜索引擎类型,由Google Inc.开发运行。您可以继续阅读下方信息,以深入了解GoogleBot基本信息,用户代理和访问控制等。
Swisscows Crawler
Swisscows Crawler蜘蛛/爬虫属于搜索引擎类型,由Swisscows AG开发运行。您可以继续阅读下方信息,以深入了解Swisscows Crawler基本信息,用户代理和访问控制等。
star-finder.de Bot
star-finder.de Bot蜘蛛/爬虫属于搜索引擎类型,由projektnet开发运行。您可以继续阅读下方信息,以深入了解star-finder.de Bot基本信息,用户代理和访问控制等。
SeznamBot
SeznamBot蜘蛛/爬虫属于搜索引擎类型,由Seznam.cz, a.s.开发运行。您可以继续阅读下方信息,以深入了解SeznamBot基本信息,用户代理和访问控制等。
MojeekBot
MojeekBot蜘蛛/爬虫属于搜索引擎类型,由Mojeek Ltd.开发运行。您可以继续阅读下方信息,以深入了解MojeekBot基本信息,用户代理和访问控制等。

相关文章

Related Articles