FeedBurner

FeedBurner蜘蛛/爬蟲屬於資訊流型別,由Google Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解FeedBurner基本資訊,使用者代理和訪問控制等。

基本資訊

FeedBurner的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲,可能存在資訊不明的情況。
蜘蛛/爬蟲名稱
FeedBurner
型別
資訊流
開發商
Google Inc.
當前狀態
活動

使用者代理

關於FeedBurner蜘蛛或者爬蟲的使用者代理字串,IP地址和伺服器,所在地等資訊如下表格所示:
FeedBurner/1.0
使用者代理字串
FeedBurner/1.0
首次出現
2022-03-23 14:12:56
最後出現
2022-07-30 21:34:13
遵循robots.txt
未知
來源
IP地址(274) 伺服器名稱 所屬國家
66.102.6.166 google-proxy-66-102-6-166.google.com US
64.233.172.199 google-proxy-64-233-172-199.google.com US
66.102.6.164 google-proxy-66-102-6-164.google.com US
64.233.172.201 google-proxy-64-233-172-201.google.com US
66.102.6.168 google-proxy-66-102-6-168.google.com US
使用者代理字串
FeedBurner/1.0
首次出現
2022-03-23 14:12:56
最後出現
2022-07-30 21:34:13
遵循robots.txt
未知
來源
IP地址(10) 伺服器名稱 所屬國家
66.249.92.59 rate-limited-proxy-66-249-92-59.google.com US
66.249.92.213 rate-limited-proxy-66-249-92-213.google.com US
66.249.92.144 rate-limited-proxy-66-249-92-144.google.com US
64.233.172.187 google-proxy-64-233-172-187.google.com US
66.249.92.94 rate-limited-proxy-66-249-92-94.google.com US

訪問控制

瞭解如何控制FeedBurner訪問許可權,避免FeedBurner抓取行為不當。

是否攔截FeedBurner?

通常不需要。除非您不希望資訊流網站或者APP對您的網站內容進行抓取,網站也不提供Feed訂閱服務,則可以考慮攔截此型別爬蟲。

通過Robots.txt攔截

您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 FeedBurner 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛,以檢查它是否真正遵循這些規則。

# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: FeedBurner
Disallow: /

您無需手動執行此操作,可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。

更多資訊

FeedBurner是一個於2004年在美國芝加哥市成立的網站饋送管理供應商。FeedBurner為部落格作者、Podcast與其他基於網路的內容釋出者提供訂製的RSS饋送與管理工具,提供予釋出者的服務包括流量分析以及一個可供選擇的廣告系統。

基本上可以使用Feedburner作為 “代理”。

據我所知,它的主要用途是。建立一個帶有大量URLs的feed(針對一個目標網站)並提交給Google Feedburner。然後Feedburner會嘗試訪問feed中的所有頁面。Feedburner 是一個分散式的服務,所以可以建立很多連線。

一般來說,只是通過使用者代理來阻止。如果不使用 Feedburner,應該不會有合法的 UA 流量。

此外,封鎖IP也沒有什麼壞處(只要對特定的IP進行封鎖)–因為Googlebot(通常是Google唯一 “關心 “的流量)不會來自這些IP。

(它在一定程度上是作為DDOS的放大作用,但它也可以被用於爬蟲。由於feedburner做的是抓取,通常提供一個 “簡明 “的頁面摘要。但最終的Feed將包含所獲取頁面的內容)。

常見蜘蛛/爬蟲

Common Spiders
Mobian bot
Mobian bot蜘蛛/爬蟲屬於資訊流型別,由Mobian LLC開發執行。您可以繼續閱讀下方資訊,以深入瞭解Mobian bot基本資訊,使用者代理和訪問控制等。
VeryHip Bot
VeryHip Bot蜘蛛/爬蟲屬於資訊流型別,由VeryHip開發執行。您可以繼續閱讀下方資訊,以深入瞭解VeryHip Bot基本資訊,使用者代理和訪問控制等。
Lenns.io
Lenns.io蜘蛛/爬蟲屬於資訊流型別,由Stanislav Bozhkov開發執行。您可以繼續閱讀下方資訊,以深入瞭解Lenns.io基本資訊,使用者代理和訪問控制等。
Twitterbot
Twitterbot蜘蛛/爬蟲屬於資訊流型別,由X Corp.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Twitterbot基本資訊,使用者代理和訪問控制等。
SeznamBot
SeznamBot蜘蛛/爬蟲屬於搜尋引擎型別,由Seznam.cz, a.s.開發執行。您可以繼續閱讀下方資訊,以深入瞭解SeznamBot基本資訊,使用者代理和訪問控制等。
Blogtrottr
Blogtrottr蜘蛛/爬蟲屬於資訊流型別,由Blogtrottr Ltd.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Blogtrottr基本資訊,使用者代理和訪問控制等。
RSSingBot
RSSingBot蜘蛛/爬蟲屬於資訊流型別,由RSSING.COM開發執行。您可以繼續閱讀下方資訊,以深入瞭解RSSingBot基本資訊,使用者代理和訪問控制等。
WordPress.com bots
WordPress.com bots蜘蛛/爬蟲屬於資訊流型別,由Automattic Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解WordPress.com bots基本資訊,使用者代理和訪問控制等。

相關文章

Related Articles