NaverBot

NaverBot蜘蛛/爬虫属于搜索引擎类型,由NAVER Corp开发运行。您可以继续阅读下方信息,以深入了解NaverBot基本信息,用户代理和访问控制等。

基本信息

NaverBot的基本信息如下表。但部分不是很规范的蜘蛛和爬虫,可能存在信息不明的情况。
蜘蛛/爬虫名称
NaverBot
类型
搜索引擎 , 信息流
开发商
NAVER Corp
当前状态
活动

用户代理

关于NaverBot蜘蛛或者爬虫的用户代理字符串,IP地址和服务器,所在地等信息如下表格所示:
Yeti/1.1
用户代理字符串
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Yeti/1.1; +https://naver.me/spd) Chrome/101.0.4951.0 Safari/537.36
首次出现
2022-07-21 14:23:59
最后出现
2022-09-06 05:14:20
遵循robots.txt
未知
来源
IP地址(10) 服务器名称 所属国家
125.209.235.181 crawl.125-209-235-181.web.naver.com KR
211.249.46.26 crawl.211-249-46-26.web.naver.com ?
125.209.235.178 crawl.125-209-235-178.web.naver.com ?
125.209.235.171 crawl.125-209-235-171.web.naver.com KR
114.111.32.163 crawl.114-111-32-163.web.naver.com KR
用户代理字符串
Mozilla/5.0 (compatible; Yeti/1.1; +http://naver.me/spd)
首次出现
2018-04-03 09:36:02
最后出现
2022-07-21 08:11:10
遵循robots.txt
未知
来源
IP地址(10) 服务器名称 所属国家
110.93.150.166 crawl.110-93-150-166.web.naver.com KR
125.209.235.175 crawl.125-209-235-175.web.naver.com KR
125.209.235.176 crawl.125-209-235-176.web.naver.com KR
125.209.235.186 crawl.125-209-235-186.web.naver.com KR
125.209.235.171 crawl.125-209-235-171.web.naver.com KR
用户代理字符串
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Yeti/1.1; +http://naver.me/spd) Chrome/101.0.4951.0 Safari/537.36
首次出现
2022-07-19 04:37:34
最后出现
2022-07-19 04:37:34
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
147.92.153.11 crawl.147-92-153-11.search.line-apps.com ?
用户代理字符串
Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.0 Safari/537.36 (compatible; Yeti/1.1; +http://naver.me/spd)
首次出现
2020-09-21 23:05:19
最后出现
2022-07-04 08:01:49
遵循robots.txt
未知
来源
IP地址(10) 服务器名称 所属国家
125.209.235.173 crawl.125-209-235-173.web.naver.com KR
125.209.235.175 crawl.125-209-235-175.web.naver.com KR
125.209.235.186 crawl.125-209-235-186.web.naver.com KR
110.93.150.193 crawl.110-93-150-193.web.naver.com KR
110.93.150.78 crawl.110-93-150-78.web.naver.com KR
用户代理字符串
Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.0 Safari/537.36 (compatible; Yeti/1.1; +http://naver.me/spd)
首次出现
2019-06-21 02:04:17
最后出现
2022-04-04 11:22:42
遵循robots.txt
未知
来源
IP地址(10) 服务器名称 所属国家
125.209.235.177 crawl.125-209-235-177.web.naver.com KR
125.209.235.171 crawl.125-209-235-171.web.naver.com KR
125.209.235.169 crawl.125-209-235-169.web.naver.com KR
125.209.235.184 crawl.125-209-235-184.web.naver.com KR
125.209.235.183 crawl.125-209-235-183.web.naver.com KR
用户代理字符串
Mozilla/5.0 (compatible; Yeti/1.1; +http://naver.me/bot)
首次出现
2017-01-19 02:30:37
最后出现
2018-08-14 16:23:47
遵循robots.txt
未知
来源
IP地址(10) 服务器名称 所属国家
125.209.235.171 crawl.125-209-235-171.web.naver.com KR
125.209.235.182 crawl.125-209-235-182.web.naver.com KR
125.209.235.181 crawl.125-209-235-181.web.naver.com KR
125.209.235.175 crawl.125-209-235-175.web.naver.com KR
125.209.235.184 crawl.125-209-235-184.web.naver.com KR
用户代理字符串
Yeti/1.1 (Naver Corp.; http://help.naver.com/robots/)
首次出现
2013-12-15 01:51:48
最后出现
2018-01-29 08:01:31
遵循robots.txt
未知
来源
IP地址(10) 服务器名称 所属国家
125.209.211.208 125.209.211.208 KR
125.209.211.207 125.209.211.207 KR
125.209.211.209 125.209.211.209 KR
125.209.211.201 125.209.211.201 KR
125.209.211.203 125.209.211.203 KR
用户代理字符串
Mozilla/5.0 (compatible; Yeti/1.1; +http://help.naver.com/support/robots.html)
首次出现
2016-05-24 08:15:00
最后出现
2017-01-15 08:27:01
遵循robots.txt
未知
来源
IP地址(10) 服务器名称 所属国家
125.209.235.174 crawl.125-209-235-174.web.naver.com KR
125.209.235.180 ? KR
125.209.235.178 ? KR
125.209.235.176 ? KR
125.209.235.173 crawl.125-209-235-173.web.naver.com KR
用户代理字符串
Mozilla/5.0 (compatible; Yeti/1.1; +http://help.naver.com/robots/)
首次出现
2014-10-01 20:00:00
最后出现
2016-05-14 06:44:31
遵循robots.txt
未知
来源
IP地址(10) 服务器名称 所属国家
125.209.235.168 125.209.235.168 KR
125.209.235.180 125.209.235.180 KR
125.209.235.182 ? KR
125.209.235.174 125.209.235.174 KR
125.209.235.186 125.209.235.186 KR
用户代理字符串
Yeti/1.1 (NHN Corp.; http://help.naver.com/robots/)
首次出现
2012-12-21 19:18:43
最后出现
2013-11-03 04:26:05
遵循robots.txt
来源
IP地址(499) 服务器名称 所属国家
125.209.235.179 crawl.125-209-235-179.web.naver.com KR
211.249.46.26 crawl.211-249-46-26.web.naver.com KR
125.209.235.186 125.209.235.186 KR
125.209.235.167 ? KR
125.209.235.170 crawl.125-209-235-170.web.naver.com KR
用户代理字符串
Yeti/1.1 (NHN Corp.; http://help.naver.com/robots/)
首次出现
2012-12-21 19:18:43
最后出现
2013-11-03 04:26:05
遵循robots.txt
未知
来源
IP地址(10) 服务器名称 所属国家
61.247.212.196 61.247.212.196 KR
61.247.212.189 61.247.212.189 KR
61.247.212.191 61.247.212.191 KR
125.209.224.107 125.209.224.107 KR
125.209.224.113 125.209.224.113 KR
用户代理字符串
Yepi/1.0 (NHN Corp.; http://help.naver.com/robots/)
首次出现
2012-12-12 06:05:25
最后出现
2013-01-14 17:13:36
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
61.247.222.59 61.247.222.59 KR
用户代理字符串
Mozilla/5.0 (iPhone; CPU iPhone OS 5_0_1 like Mac OS X) (compatible; Yeti-Mobile/0.1; +http://help.naver.com/robots/)
首次出现
2011-12-12 05:04:16
最后出现
2012-03-06 02:10:25
遵循robots.txt
未知
来源
IP地址(5) 服务器名称 所属国家
61.247.221.46 61.247.221.46 KR
61.247.221.49 61.247.221.49 KR
61.247.204.32 61.247.204.32 KR
61.247.204.33 61.247.204.33 KR
61.247.221.37 61.247.221.37 KR
用户代理字符串
Yeti-FeedItemCrawler/1.0 (NHN Corp.; http://help.naver.com/robots/)
首次出现
2012-01-11 15:30:00
最后出现
2012-01-10 21:15:47
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
119.235.237.89 crawl-119-235-237-89.naver.jp JP
用户代理字符串
Mozilla/4.0 (compatible; NaverBot/1.0; http://help.naver.com/delete_main.asp)
首次出现
2008-10-07 20:11:13
最后出现
2008-10-07 20:11:13
遵循robots.txt
未知
来源
IP地址(19) 服务器名称 所属国家
61.247.221.80 61.247.221.80 KR
61.247.221.91 61.247.221.91 KR
61.247.221.81 61.247.221.81 KR
61.247.221.92 61.247.221.92 KR
61.247.221.82 61.247.221.82 KR
用户代理字符串
Mozilla/4.0 (compatible; NaverBot/1.0; http://help.naver.com/delete_main.asp)
首次出现
2008-10-07 20:11:13
最后出现
2008-10-07 20:11:13
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
202.179.180.45 202.179.180.45 KR
用户代理字符串
Yeti/1.0 (+http://help.naver.com/robots/)
首次出现
2008-10-07 05:20:20
最后出现
2008-10-07 05:20:20
遵循robots.txt
未知
来源
IP地址(11) 服务器名称 所属国家
119.235.237.18 crawl-119-235-237-18.naver.jp JP
119.235.237.14 crawl-119-235-237-14.naver.jp JP
119.235.237.92 crawl-119-235-237-92.naver.jp JP
61.247.204.36 61.247.204.36 KR
61.247.204.37 61.247.204.37 KR
用户代理字符串
Yeti/1.0 (+http://help.naver.com/robots/)
首次出现
2008-10-07 05:20:20
最后出现
2008-10-07 05:20:20
遵循robots.txt
未知
来源
IP地址(1) 服务器名称 所属国家
61.247.222.49 crawl-61-247-222-49.naver.jp KR

访问控制

了解如何控制NaverBot访问权限,避免NaverBot抓取行为不当。

是否拦截NaverBot?

一般不要拦截。搜索引擎爬虫为搜索引擎提供动力,是用户发现您网站的有效途径。事实上,拦截搜索引擎爬虫可能会严重减少网站的自然流量。

通过Robots.txt拦截

您可以通过在网站的 robots.txt 中设置用户代理访问规则来屏蔽 NaverBot 或限制其访问权限。我们建议安装 Spider Analyser 插件,以检查它是否真正遵循这些规则。

# robots.txt
# 下列代码一般情况可以拦截该代理
User-agent: NaverBot
Disallow: /

您无需手动执行此操作,可通过我们的 Wordpress 插件 Spider Analyser 来拦截不必要的蜘蛛或者爬虫。

更多信息

1. 定义和收集网络文件

NaverBot 从 Internet 上自动收集的各种本地和本地 Web 文档是 Naver Web 搜索结果中公开的文档。

NAVER Web 文件搜索尊重在 Internet 上发布和提供宝贵信息的 Web 运营商和作者的意见,并致力于遵守机器人操作的国际标准。

2. NAVER 的 Web 文件收集策略和robots.txt

1) 在NAVER上运行的搜索机器人是Yeti。

Mozilla/5.0(compatible;Yeti...)

NAVER 搜索机器人的标识形式与 “用户” 相同。

2) NAVER 搜索机器人符合 robots.txt 的国际搜索协议。

有关详细信息,请参阅以下链接:robots.txt

您可以添加 ‘User-agent: Yeti’ 以对 NAVER 搜索机器人应用限制性规则。

3) robots.txt 是将网站或文档排除在搜索之外的标准协议,搜索公司不会读取安装此文件的网站或通过该文件指定的页面上的文档。

这是为了在收集搜索文档的过程中,优先考虑网站运营商和用户的立场,并重视符合正确互联网发展宗旨的隐私或版权保护问题。

4) 即使文档已公开在互联网上查看,也并不意味着版权方或网站运营商允许以任何方式(包括搜索机器人)进行披露、复制和使用。

特别是,由于搜索等原因收集个人文档或信息可能会导致版权侵权或隐私泄露。

因此,如果一方安装 robots.txt,则表明不允许任何人进行任何自动收集操作,包括故意收集文档、复制和搜索机械机器人。

5) 世界各地的表单搜索服务(包括 NAVER)和收集程序都制定了这些通用的 robots.txt协议,并在安装这些文件时停止收集搜索等,以保护信息并防止互联网功能失调。

3. NAVER 的 Web 文件删除政策

NAVER 尊重在互联网上发布信息的运营商和作者的意见。

如果您希望在 NAVER 收集的 Web 文件和相关搜索结果中展示您创建或操作的 Web 文件,或者您不希望搜索或因操作等原因感到不适,请按照以下步骤操作: 请求排除 Web 文件

常见蜘蛛/爬虫

Common Spiders

相关文章

Related Articles