startpage bot

startpage bot蜘蛛/爬蟲屬於搜尋引擎型別,由Startpage BV開發執行。您可以繼續閱讀下方資訊,以深入瞭解startpage bot基本資訊,使用者代理和訪問控制等。

基本資訊

startpage bot的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲,可能存在資訊不明的情況。
蜘蛛/爬蟲名稱
startpage bot
型別
搜尋引擎
開發商
Startpage BV
當前狀態
活動

使用者代理

關於startpage bot蜘蛛或者爬蟲的使用者代理字串,IP地址和伺服器,所在地等資訊如下表格所示:
StartpagePrivateImageProxy/2.0
使用者代理字串
StartpagePrivateImageProxy/2.0 (https://www.startpage.com/; support@startpage.com) requests/2.23.0
首次出現
2021-12-13 20:53:25
最後出現
2022-02-21 16:48:51
遵循robots.txt
未知
來源
IP地址(3) 伺服器名稱 所屬國家
213.144.233.251 rt233bb144-213-251.routit.net NL
37.0.86.2 rt86bb0-37-2.routit.net NL
64.71.175.150 s21.dmoz.ixquick.com US
213.144.233.249 rt233bb144-213-249.routit.net NL
37.0.86.10 rt86bb0-37-10.routit.net NL
213.144.233.248 rt233bb144-213-248.routit.net NL
37.0.86.14 rt86bb0-37-14.routit.net ?
64.71.175.203 64.71.175.203 US
37.0.86.54 rt86bb0-37-54.routit.net NL
213.144.235.195 rt235bb144-213-195.routit.net NL
34.243.123.118 ec2-34-243-123-118.eu-west-1.compute.amazonaws.com IE
37.0.81.241 rt81bb0-37-241.routit.net NL
64.71.134.103 64.71.134.103 US
64.71.134.15 64.71.134.15 US
37.0.86.46 rt86bb0-37-46.routit.net NL
64.71.175.165 s6.cobrand.ixquick.com US
213.144.235.196 rt235bb144-213-196.routit.net NL
37.0.81.236 rt81bb0-37-236.routit.net NL
213.144.233.254 rt233bb144-213-254.routit.net NL
37.0.86.38 rt86bb0-37-38.routit.net NL
64.71.134.41 64.71.134.41 CA
37.0.81.234 rt81bb0-37-234.routit.net NL
37.0.81.238 rt81bb0-37-238.routit.net NL
64.71.134.79 64.71.134.79 CA
35.162.23.156 ec2-35-162-23-156.us-west-2.compute.amazonaws.com US
67.63.61.231 67.63.61.231 US
67.63.61.241 67.63.61.241 US
37.0.81.237 rt81bb0-37-237.routit.net NL
使用者代理字串
StartpagePrivateImageProxy/2.0 (https://www.startpage.com/; support@startpage.com) requests/2.23.0
首次出現
2021-12-13 20:53:25
最後出現
2022-02-21 16:48:51
遵循robots.txt
未知
來源
IP地址(3) 伺服器名稱 所屬國家
213.144.233.249 rt233bb144-213-249.routit.net NL
37.0.86.10 rt86bb0-37-10.routit.net NL
213.144.233.248 rt233bb144-213-248.routit.net NL
使用者代理字串
ixquick.com
首次出現
2020-12-28 03:42:31
最後出現
2021-01-11 09:08:16
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
3.138.173.82 ec2-3-138-173-82.us-east-2.compute.amazonaws.com US
173.209.56.26 odedi107164.mywhc.ca CA
151.236.55.168 151-236-55-168.static.as29550.net GB
151.236.55.216 bbb.linguebrescia.it GB
103.250.79.92 103.250.79.92 IN
使用者代理字串
Ixquick.com
首次出現
2019-09-24 00:14:23
最後出現
2019-10-28 18:37:37
遵循robots.txt
未知
來源
IP地址(2) 伺服器名稱 所屬國家
151.236.55.168 151-236-55-168.static.as29550.net GB
151.236.55.216 bbb.linguebrescia.it GB

訪問控制

瞭解如何控制startpage bot訪問許可權,避免startpage bot抓取行為不當。

是否攔截startpage bot?

一般不要攔截。搜尋引擎爬蟲為搜尋引擎提供動力,是使用者發現您網站的有效途徑。事實上,攔截搜尋引擎爬蟲可能會嚴重減少網站的自然流量。

通過Robots.txt攔截

您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 startpage bot 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛,以檢查它是否真正遵循這些規則。

Plain text
Copy to clipboard
Open code in new window
EnlighterJS 3 Syntax Highlighter
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: startpage bot
Disallow: /
# robots.txt # 下列程式碼一般情況可以攔截該代理 User-agent: startpage bot Disallow: /
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: startpage bot
Disallow: /

您無需手動執行此操作,可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。

更多資訊

Startpage是一家全球性的隱私技術公司,其宗旨是始終將隱私放在第一位。Startpage的一套易於使用的隱私產品幫助世界各地的任何人在網上保護他們的個人資料。

Startpage被稱為隱私搜尋的先驅,負責在2006年建立了世界上第一個和最隱私的搜尋引擎。從那時起,Startpage繼續建立一系列的產品,使每個人都能獲得隱私。

立足歐洲

Startpage成立並保持總部在荷蘭,這意味著我們的使用者受到嚴格的歐洲消費者隱私法的保護,包括GDPR。這些被廣泛認為是世界上最強大的隱私保護。在Startpage上進行的每一次搜尋都是通過Startpage專有的個人資料保護技術處理的。作為這項技術的一部分,使用者可以選擇只利用歐洲伺服器。

產品

  • Startpage隱私保護-將你的搜尋引擎設定為Startpage,並阻止整個網際網路的跟蹤。
  • Startpage隱私搜尋-在沒有跟蹤、剖析或搜尋歷史的情況下搜尋網頁。
  • 匿名瀏覽-無痕跡地訪問和瀏覽其他網站。

價值觀

  • 真正的隱私-Startpage毫不妥協地致力於保護人們的個人資料。
  • 最好的技術-Startpage致力於提供最好的產品並提供一流的搜尋結果。
  • 選擇-Startpage永遠不會告訴你該做什麼,而是提供最簡單和最安全的搜尋和瀏覽網際網路的選擇。

團隊

Startpage由一家荷蘭公司擁有,該公司在荷蘭海牙的總部運營,是System1的一部分,System1是一家位於美國的上市公司。Startpage的全球隱私倡導者團隊由工程師、創作者和支援經理組成。如果你有任何問題,可以通過郵箱進行聯絡support@startpage.com。

常見蜘蛛/爬蟲

Common Spiders
Mithril
Mithril蜘蛛/爬蟲屬於搜尋引擎型別,由University of Michigan開發執行。您可以繼續閱讀下方資訊,以深入瞭解Mithril基本資訊,使用者代理和訪問控制等。
fynd.bot crawler
fynd.bot crawler蜘蛛/爬蟲屬於搜尋引擎型別,由fynd.bot開發執行。您可以繼續閱讀下方資訊,以深入瞭解fynd.bot crawler基本資訊,使用者代理和訪問控制等。
Alibaba crawler
Alibaba crawler蜘蛛/爬蟲屬於搜尋引擎型別,由Alibaba Group開發執行。您可以繼續閱讀下方資訊,以深入瞭解Alibaba crawler基本資訊,使用者代理和訪問控制等。
Googlebot
GoogleBot蜘蛛/爬蟲屬於搜尋引擎型別,由Google Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解GoogleBot基本資訊,使用者代理和訪問控制等。
Swisscows Crawler
Swisscows Crawler蜘蛛/爬蟲屬於搜尋引擎型別,由Swisscows AG開發執行。您可以繼續閱讀下方資訊,以深入瞭解Swisscows Crawler基本資訊,使用者代理和訪問控制等。
star-finder.de Bot
star-finder.de Bot蜘蛛/爬蟲屬於搜尋引擎型別,由projektnet開發執行。您可以繼續閱讀下方資訊,以深入瞭解star-finder.de Bot基本資訊,使用者代理和訪問控制等。
SeznamBot
SeznamBot蜘蛛/爬蟲屬於搜尋引擎型別,由Seznam.cz, a.s.開發執行。您可以繼續閱讀下方資訊,以深入瞭解SeznamBot基本資訊,使用者代理和訪問控制等。
MojeekBot
MojeekBot蜘蛛/爬蟲屬於搜尋引擎型別,由Mojeek Ltd.開發執行。您可以繼續閱讀下方資訊,以深入瞭解MojeekBot基本資訊,使用者代理和訪問控制等。

相關文章

Related Articles