GoogleDocs

GoogleDocs蜘蛛/爬蟲屬於工具型別,由Google Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解GoogleDocs基本資訊,使用者代理和訪問控制等。

基本資訊

GoogleDocs的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲,可能存在資訊不明的情況。
蜘蛛/爬蟲名稱
GoogleDocs
型別
工具
開發商
Google Inc.
當前狀態
活動

使用者代理

關於GoogleDocs蜘蛛或者爬蟲的使用者代理字串,IP地址和伺服器,所在地等資訊如下表格所示:
GoogleDocs; drawings
使用者代理字串
Mozilla/5.0 (compatible; GoogleDocs; drawings; +http://docs.google.com)
首次出現
2016-03-12 11:45:21
最後出現
2024-11-01 18:54:29
遵循robots.txt
來源
IP地址(13) 伺服器名稱 所屬國家
66.249.83.102 google-proxy-66-249-83-102.google.com US
66.249.88.218 google-proxy-66-249-88-218.google.com US
66.249.88.88 google-proxy-66-249-88-88.google.com US
66.249.88.152 google-proxy-66-249-88-152.google.com US
66.102.8.4 google-proxy-66-102-8-4.google.com US
66.249.83.202 google-proxy-66-249-83-202.google.com US
66.102.8.54 google-proxy-66-102-8-54.google.com US
66.249.88.11 google-proxy-66-249-88-11.google.com US
66.102.7.27 google-proxy-66-102-7-27.google.com US
66.249.83.194 google-proxy-66-249-83-194.google.com US
66.102.8.100 google-proxy-66-102-8-100.google.com US
66.249.83.35 google-proxy-66-249-83-35.google.com US
使用者代理字串
Mozilla/5.0 (compatible; GoogleDocs; apps-presentations; +http://docs.google.com)
首次出現
2016-11-07 15:46:10
最後出現
2024-11-01 18:52:45
遵循robots.txt
來源
IP地址(21) 伺服器名稱 所屬國家
66.249.88.212 google-proxy-66-249-88-212.google.com US
66.249.88.218 google-proxy-66-249-88-218.google.com US
66.249.88.86 google-proxy-66-249-88-86.google.com US
66.102.7.150 google-proxy-66-102-7-150.google.com US
66.249.83.44 google-proxy-66-249-83-44.google.com US
74.125.210.25 google-proxy-74-125-210-25.google.com US
66.102.7.140 google-proxy-66-102-7-140.google.com US
66.249.83.40 google-proxy-66-249-83-40.google.com US
66.102.8.4 google-proxy-66-102-8-4.google.com US
66.102.8.20 google-proxy-66-102-8-20.google.com US
66.249.83.90 google-proxy-66-249-83-90.google.com US
66.102.7.234 google-proxy-66-102-7-234.google.com US
66.249.88.68 google-proxy-66-249-88-68.google.com US
使用者代理字串
Mozilla/5.0 (compatible; GoogleDocs; documents; +http://docs.google.com)
首次出現
2016-10-11 13:51:14
最後出現
2024-11-01 18:51:07
遵循robots.txt
來源
IP地址(36) 伺服器名稱 所屬國家
74.125.210.40 google-proxy-74-125-210-40.google.com US
74.125.210.38 google-proxy-74-125-210-38.google.com US
66.249.88.216 google-proxy-66-249-88-216.google.com US
66.249.88.214 google-proxy-66-249-88-214.google.com US
66.102.6.166 google-proxy-66-102-6-166.google.com US
66.102.8.104 google-proxy-66-102-8-104.google.com US
74.125.212.245 google-proxy-74-125-212-245.google.com US
66.102.8.124 google-proxy-66-102-8-124.google.com US
66.102.8.126 google-proxy-66-102-8-126.google.com US
66.102.8.97 google-proxy-66-102-8-97.google.com US
66.102.7.182 google-proxy-66-102-7-182.google.com US
66.102.7.185 google-proxy-66-102-7-185.google.com US
66.102.7.188 google-proxy-66-102-7-188.google.com US
66.102.8.100 google-proxy-66-102-8-100.google.com US
66.102.8.102 google-proxy-66-102-8-102.google.com US
192.178.10.83 google-proxy-192-178-10-83.google.com US
66.102.8.108 google-proxy-66-102-8-108.google.com US
使用者代理字串
Mozilla/5.0 (compatible; GoogleDocs; apps-spreadsheets; +http://docs.google.com)
首次出現
2016-05-16 03:22:46
最後出現
2024-05-06 06:58:48
遵循robots.txt
來源
IP地址(90) 伺服器名稱 所屬國家
66.249.92.131 rate-limited-proxy-66-249-92-131.google.com US
66.249.92.159 rate-limited-proxy-66-249-92-159.google.com US
66.249.92.39 rate-limited-proxy-66-249-92-39.google.com US
66.249.92.40 rate-limited-proxy-66-249-92-40.google.com US
66.249.92.73 rate-limited-proxy-66-249-92-73.google.com US
66.249.92.195 rate-limited-proxy-66-249-92-195.google.com ?
66.249.92.135 rate-limited-proxy-66-249-92-135.google.com US
66.249.92.89 rate-limited-proxy-66-249-92-89.google.com US
66.249.92.37 rate-limited-proxy-66-249-92-37.google.com US
66.249.92.133 rate-limited-proxy-66-249-92-133.google.com US
66.102.7.176 google-proxy-66-102-7-176.google.com US
66.249.92.35 rate-limited-proxy-66-249-92-35.google.com US
66.249.90.108 rate-limited-proxy-66-249-90-108.google.com US
66.249.92.200 rate-limited-proxy-66-249-92-200.google.com US
66.249.92.152 rate-limited-proxy-66-249-92-152.google.com US
66.249.92.72 rate-limited-proxy-66-249-92-72.google.com US
66.249.92.32 rate-limited-proxy-66-249-92-32.google.com US
74.125.151.203 rate-limited-proxy-74-125-151-203.google.com US
74.125.151.209 rate-limited-proxy-74-125-151-209.google.com US
74.125.151.206 rate-limited-proxy-74-125-151-206.google.com US
66.249.92.45 rate-limited-proxy-66-249-92-45.google.com US
66.249.92.151 rate-limited-proxy-66-249-92-151.google.com US
66.249.92.5 rate-limited-proxy-66-249-92-5.google.com US
66.249.92.33 rate-limited-proxy-66-249-92-33.google.com US
66.249.92.6 rate-limited-proxy-66-249-92-6.google.com ?
66.249.92.70 rate-limited-proxy-66-249-92-70.google.com US
66.249.92.43 rate-limited-proxy-66-249-92-43.google.com US
66.249.92.9 rate-limited-proxy-66-249-92-9.google.com US
66.249.92.10 rate-limited-proxy-66-249-92-10.google.com US
66.249.92.44 rate-limited-proxy-66-249-92-44.google.com US
66.249.92.8 rate-limited-proxy-66-249-92-8.google.com US
66.249.92.163 rate-limited-proxy-66-249-92-163.google.com US
66.249.89.168 rate-limited-proxy-66-249-89-168.google.com GB
74.125.217.103 rate-limited-proxy-74-125-217-103.google.com US
74.125.217.104 rate-limited-proxy-74-125-217-104.google.com US
66.249.92.81 rate-limited-proxy-66-249-92-81.google.com US
66.249.90.103 rate-limited-proxy-66-249-90-103.google.com US
66.249.90.105 rate-limited-proxy-66-249-90-105.google.com US
66.249.90.104 rate-limited-proxy-66-249-90-104.google.com US
66.249.92.80 rate-limited-proxy-66-249-92-80.google.com US
74.125.217.105 rate-limited-proxy-74-125-217-105.google.com US
44.193.159.76 ec2-44-193-159-76.compute-1.amazonaws.com US
使用者代理字串
Mozilla/5.0 (compatible; GoogleDocs; jam; +http://docs.google.com)
首次出現
2022-03-21 12:33:21
最後出現
2022-03-21 12:33:21
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
66.102.8.43 google-proxy-66-102-8-43.google.com US
使用者代理字串
Mozilla/5.0 (compatible; GoogleDocs; +http://docs.google.com; +Google-Document-Conversion)
首次出現
2015-12-21 11:03:01
最後出現
2021-09-19 05:22:41
遵循robots.txt
未知
來源
IP地址(19) 伺服器名稱 所屬國家
66.249.83.100 google-proxy-66-249-83-100.google.com US
74.125.213.4 google-proxy-74-125-213-4.google.com US
64.233.172.63 google-proxy-64-233-172-63.google.com US
74.125.213.29 google-proxy-74-125-213-29.google.com US
74.125.213.1 google-proxy-74-125-213-1.google.com US
66.249.83.127 google-proxy-66-249-83-127.google.com US
66.102.8.51 google-proxy-66-102-8-51.google.com US
66.249.83.125 google-proxy-66-249-83-125.google.com US
74.125.213.31 google-proxy-74-125-213-31.google.com US
66.102.7.175 google-proxy-66-102-7-175.google.com US
使用者代理字串
Mozilla/5.0 (compatible; GoogleDocs; spreadsheet_forms; +http://docs.google.com)
首次出現
2016-03-12 01:45:23
最後出現
2019-08-21 10:50:03
遵循robots.txt
來源
IP地址(6) 伺服器名稱 所屬國家
66.102.8.8 google-proxy-66-102-8-8.google.com US
66.102.8.4 google-proxy-66-102-8-4.google.com US
66.102.8.54 google-proxy-66-102-8-54.google.com US
64.233.172.148 google-proxy-64-233-172-148.google.com US
66.102.8.50 google-proxy-66-102-8-50.google.com US
66.102.8.52 google-proxy-66-102-8-52.google.com US

訪問控制

瞭解如何控制GoogleDocs訪問許可權,避免GoogleDocs抓取行為不當。

是否攔截GoogleDocs?

可能不需要。工具型別爬蟲通常為網站所有者使用此類工具對網站進行相關服務請求才會出現。當然,實際情況需站長判斷後再作決定。

通過Robots.txt攔截

您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 GoogleDocs 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛,以檢查它是否真正遵循這些規則。

Plain text
Copy to clipboard
Open code in new window
EnlighterJS 3 Syntax Highlighter
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: GoogleDocs
Disallow: /
# robots.txt # 下列程式碼一般情況可以攔截該代理 User-agent: GoogleDocs Disallow: /
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: GoogleDocs
Disallow: /

您無需手動執行此操作,可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。

常見蜘蛛/爬蟲

Common Spiders
Google-NotebookLM
Google-NotebookLM蜘蛛/爬蟲屬於工具型別,由Google Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Google-NotebookLM基本資訊,使用者代理和訪問控制等。
Apidog
Apidog蜘蛛/爬蟲屬於工具型別,由Apidog, Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Apidog基本資訊,使用者代理和訪問控制等。
Google Firebase
Google Firebase蜘蛛/爬蟲屬於工具型別,由Google Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Google Firebase基本資訊,使用者代理和訪問控制等。
magereport
magereport蜘蛛/爬蟲屬於工具型別,由Hypernode B.V.開發執行。您可以繼續閱讀下方資訊,以深入瞭解magereport基本資訊,使用者代理和訪問控制等。
7Siters
7Siters蜘蛛/爬蟲屬於工具型別,由Re-Re Web Studio開發執行。您可以繼續閱讀下方資訊,以深入瞭解7Siters基本資訊,使用者代理和訪問控制等。
GoodBarber
GoodBarber蜘蛛/爬蟲屬於工具型別,由GoodBarber SAS開發執行。您可以繼續閱讀下方資訊,以深入瞭解GoodBarber基本資訊,使用者代理和訪問控制等。
PWABuilder
PWABuilder蜘蛛/爬蟲屬於工具型別,由Microsoft Corporation.開發執行。您可以繼續閱讀下方資訊,以深入瞭解PWABuilder基本資訊,使用者代理和訪問控制等。
globalping bot
globalping bot蜘蛛/爬蟲屬於工具型別,由globalping.io開發執行。您可以繼續閱讀下方資訊,以深入瞭解globalping bot基本資訊,使用者代理和訪問控制等。

相關文章

Related Articles