presearch crawler

presearch crawler蜘蛛/爬虫属于搜索引擎类型,由Presearch.org Global Limited开发运行。您可以继续阅读下方信息,以深入了解presearch crawler基本信息,用户代理和访问控制等。

基本信息

presearch crawler的基本信息如下表。但部分不是很规范的蜘蛛和爬虫,可能存在信息不明的情况。
蜘蛛/爬虫名称
presearch crawler
类型
搜索引擎
开发商
Presearch.org Global Limited
当前状态
活动

用户代理

关于presearch crawler蜘蛛或者爬虫的用户代理字符串,IP地址和服务器,所在地等信息如下表格所示:
Presearch/1.0
用户代理字符串
Presearch/1.0 (Presearch.org web crawler; http://presearch.org/; crawler@presearch.org)
首次出现
2022-03-25 13:11:59
最后出现
2022-04-07 05:52:57
遵循robots.txt
未知
来源
IP地址(19) 服务器名称 所属国家
104.168.54.207 104-168-54-207-host.colocrossing.com US
104.168.54.209 104-168-54-209-host.colocrossing.com US
104.168.54.190 104-168-54-190-host.colocrossing.com HK
104.168.54.189 104-168-54-189-host.colocrossing.com US
104.168.54.243 104-168-54-243-host.colocrossing.com ?
104.168.54.248 104-168-54-248-host.colocrossing.com US
104.168.54.227 104-168-54-227-host.colocrossing.com US
104.168.54.247 104-168-54-247-host.colocrossing.com US
104.168.54.224 104-168-54-224-host.colocrossing.com US
104.168.54.237 104-168-54-237-host.colocrossing.com US
用户代理字符串
Mozilla/5.0 (Macintosh; Intel Mac OS X 10.13; rv:59.0) Gecko/20100101 Firefox/59.0 presearch-cocrawler/0.1.5.dev568+g1a651ed.d20180718 (+https://presearchlabs.github.io/presearch-crawler/)
首次出现
2019-01-19 04:12:15
最后出现
2019-01-19 04:12:15
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
64.13.139.226 rd226.bx9.net US

访问控制

了解如何控制presearch crawler访问权限,避免presearch crawler抓取行为不当。

是否拦截presearch crawler?

一般不要拦截。搜索引擎爬虫为搜索引擎提供动力,是用户发现您网站的有效途径。事实上,拦截搜索引擎爬虫可能会严重减少网站的自然流量。

通过Robots.txt拦截

您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 presearch crawler 或限制其访问权限。我们建议安装 Spider Analyser 插件,以检查它是否真正遵循这些规则。

	# robots.txt
	# 下列代码一般情况可以拦截该代理
	
	User-agent: presearch crawler
	Disallow: /

您无需手动执行此操作,可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。

更多信息

Presearch引擎是一个新一代的搜索引擎,它的建立是为了给世界提供一个去中心化的替代方案,它的运作更像是一个代表其社区而不是股东的公共事业。

其愿景是创建完全开放和透明的算法,利用区块链技术和Presearch社区的人力,以便类似于维基百科,任何人都可以参与搜索索引的创建和策划,提供卓越的结果和抗审查能力。

Presearch为其用户提供了更多的搜索选择和积极的个性化,他们可以控制自己的体验,而不是建立在跟踪和剖析用户基础上的自动个性化。

当前版本的Presearch引擎是向最终愿景迈出的一步,它采用了由社区成员操作的节点来访问现有搜索资源和数据源的数据。一系列社区生成的包也可以显示在传统的搜索结果之上,以提供增强的信息。

下一步是开始将Presearch的索引分层在这个平台之上,以便社区驱动的结果可以取代外部结果,但在Presearch索引发展的过程中,仍然为用户提供全面的答案。

要使用Presearch进行搜索,请访问https://presearch.com。

常见蜘蛛/爬虫

Common Spiders
fynd.bot crawler
fynd.bot crawler蜘蛛/爬虫属于搜索引擎类型,由fynd.bot开发运行。您可以继续阅读下方信息,以深入了解fynd.bot crawler基本信息,用户代理和访问控制等。
Alibaba crawler
Alibaba crawler蜘蛛/爬虫属于搜索引擎类型,由Alibaba Group开发运行。您可以继续阅读下方信息,以深入了解Alibaba crawler基本信息,用户代理和访问控制等。
Googlebot
GoogleBot蜘蛛/爬虫属于搜索引擎类型,由Google Inc.开发运行。您可以继续阅读下方信息,以深入了解GoogleBot基本信息,用户代理和访问控制等。
Swisscows Crawler
Swisscows Crawler蜘蛛/爬虫属于搜索引擎类型,由Swisscows AG开发运行。您可以继续阅读下方信息,以深入了解Swisscows Crawler基本信息,用户代理和访问控制等。
star-finder.de Bot
star-finder.de Bot蜘蛛/爬虫属于搜索引擎类型,由projektnet开发运行。您可以继续阅读下方信息,以深入了解star-finder.de Bot基本信息,用户代理和访问控制等。
SeznamBot
SeznamBot蜘蛛/爬虫属于搜索引擎类型,由Seznam.cz, a.s.开发运行。您可以继续阅读下方信息,以深入了解SeznamBot基本信息,用户代理和访问控制等。
MojeekBot
MojeekBot蜘蛛/爬虫属于搜索引擎类型,由Mojeek Ltd.开发运行。您可以继续阅读下方信息,以深入了解MojeekBot基本信息,用户代理和访问控制等。
Bravebot
Bravebot蜘蛛/爬虫属于搜索引擎类型,由Brave Software Inc.开发运行。您可以继续阅读下方信息,以深入了解Bravebot基本信息,用户代理和访问控制等。

相关文章

Related Articles