slackbot

slackbot蜘蛛/爬蟲屬於其他型別,由Slack Technologies, Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解slackbot基本資訊,使用者代理和訪問控制等。

基本資訊

slackbot的基本資訊如下表。但部分不是很規範的蜘蛛和爬蟲,可能存在資訊不明的情況。
蜘蛛/爬蟲名稱
slackbot
型別
其他
開發商
Slack Technologies, Inc.
當前狀態
活動

使用者代理

關於slackbot蜘蛛或者爬蟲的使用者代理字串,IP地址和伺服器,所在地等資訊如下表格所示:
Slack-ImgProxy
使用者代理字串
Slack-ImgProxy (+https://api.slack.com/robots)
首次出現
2016-09-22 05:13:27
最後出現
2022-12-02 05:28:07
遵循robots.txt
未知
來源
IP地址(15865) 伺服器名稱 所屬國家
3.80.199.255 ec2-3-80-199-255.compute-1.amazonaws.com ?
54.198.91.249 ec2-54-198-91-249.compute-1.amazonaws.com US
18.143.148.249 ec2-18-143-148-249.ap-southeast-1.compute.amazonaws.com SG
52.221.181.165 ec2-52-221-181-165.ap-southeast-1.compute.amazonaws.com SG
54.254.200.112 ec2-54-254-200-112.ap-southeast-1.compute.amazonaws.com SG
13.228.183.21 ec2-13-228-183-21.ap-southeast-1.compute.amazonaws.com SG
54.169.42.164 ec2-54-169-42-164.ap-southeast-1.compute.amazonaws.com SG
13.212.107.210 ec2-13-212-107-210.ap-southeast-1.compute.amazonaws.com SG
34.208.28.87 ec2-34-208-28-87.us-west-2.compute.amazonaws.com US
18.232.184.28 ec2-18-232-184-28.compute-1.amazonaws.com US
3.25.205.160 ec2-3-25-205-160.ap-southeast-2.compute.amazonaws.com AU
18.192.66.87 ec2-18-192-66-87.eu-central-1.compute.amazonaws.com DE
3.26.240.69 ec2-3-26-240-69.ap-southeast-2.compute.amazonaws.com AU
3.122.114.196 ec2-3-122-114-196.eu-central-1.compute.amazonaws.com DE
54.79.213.125 ec2-54-79-213-125.ap-southeast-2.compute.amazonaws.com AU
3.26.114.126 ec2-3-26-114-126.ap-southeast-2.compute.amazonaws.com AU
54.252.27.161 ec2-54-252-27-161.ap-southeast-2.compute.amazonaws.com AU
3.111.39.105 ec2-3-111-39-105.ap-south-1.compute.amazonaws.com IN
52.66.249.52 ec2-52-66-249-52.ap-south-1.compute.amazonaws.com IN
54.151.164.132 ec2-54-151-164-132.ap-southeast-1.compute.amazonaws.com SG
使用者代理字串
Slackbot 1.0 (+https://api.slack.com/robots)
首次出現
2018-05-15 05:40:47
最後出現
2022-11-18 22:27:47
遵循robots.txt
未知
來源
IP地址(1155) 伺服器名稱 所屬國家
52.55.151.228 ec2-52-55-151-228.compute-1.amazonaws.com US
44.201.187.5 ec2-44-201-187-5.compute-1.amazonaws.com US
54.81.28.98 ec2-54-81-28-98.compute-1.amazonaws.com US
54.167.84.134 ec2-54-167-84-134.compute-1.amazonaws.com US
3.239.221.20 ec2-3-239-221-20.compute-1.amazonaws.com US
3.88.146.72 ec2-3-88-146-72.compute-1.amazonaws.com US
3.239.95.28 ec2-3-239-95-28.compute-1.amazonaws.com US
3.239.9.121 ec2-3-239-9-121.compute-1.amazonaws.com ?
44.204.231.3 ec2-44-204-231-3.compute-1.amazonaws.com US
34.207.134.184 ec2-34-207-134-184.compute-1.amazonaws.com US
3.80.138.4 ec2-3-80-138-4.compute-1.amazonaws.com US
18.209.70.194 ec2-18-209-70-194.compute-1.amazonaws.com US
44.195.79.176 ec2-44-195-79-176.compute-1.amazonaws.com US
44.192.33.88 ec2-44-192-33-88.compute-1.amazonaws.com US
18.207.148.51 ec2-18-207-148-51.compute-1.amazonaws.com US
54.145.228.211 ec2-54-145-228-211.compute-1.amazonaws.com US
3.87.200.94 ec2-3-87-200-94.compute-1.amazonaws.com US
174.129.61.95 ec2-174-129-61-95.compute-1.amazonaws.com US
44.210.16.187 ec2-44-210-16-187.compute-1.amazonaws.com US
3.90.149.81 ec2-3-90-149-81.compute-1.amazonaws.com US
使用者代理字串
Slackbot-LinkExpanding 1.0 (+https://api.slack.com/robots)
首次出現
2015-06-29 13:53:38
最後出現
2022-11-18 22:27:47
遵循robots.txt
來源
IP地址(883) 伺服器名稱 所屬國家
44.204.246.16 ec2-44-204-246-16.compute-1.amazonaws.com US
107.23.124.231 ec2-107-23-124-231.compute-1.amazonaws.com US
54.144.253.163 ec2-54-144-253-163.compute-1.amazonaws.com US
3.85.9.197 ec2-3-85-9-197.compute-1.amazonaws.com US
44.210.105.111 ec2-44-210-105-111.compute-1.amazonaws.com US
44.204.231.3 ec2-44-204-231-3.compute-1.amazonaws.com US
3.80.53.210 ec2-3-80-53-210.compute-1.amazonaws.com US
3.238.182.190 ec2-3-238-182-190.compute-1.amazonaws.com ?
18.212.57.216 ec2-18-212-57-216.compute-1.amazonaws.com US
44.200.179.199 ec2-44-200-179-199.compute-1.amazonaws.com US
35.169.117.74 ec2-35-169-117-74.compute-1.amazonaws.com US
52.203.71.54 ec2-52-203-71-54.compute-1.amazonaws.com US
107.22.64.181 ec2-107-22-64-181.compute-1.amazonaws.com US
44.211.144.63 ec2-44-211-144-63.compute-1.amazonaws.com US
54.242.76.52 ec2-54-242-76-52.compute-1.amazonaws.com US
34.206.52.206 ec2-34-206-52-206.compute-1.amazonaws.com US
3.236.243.33 ec2-3-236-243-33.compute-1.amazonaws.com US
34.227.22.209 ec2-34-227-22-209.compute-1.amazonaws.com US
3.85.3.148 ec2-3-85-3-148.compute-1.amazonaws.com US
3.237.91.221 ec2-3-237-91-221.compute-1.amazonaws.com US
使用者代理字串
Slack-ImgProxy 149 (+https://api.slack.com/robots)
首次出現
2016-09-20 06:36:08
最後出現
2016-09-21 05:52:45
遵循robots.txt
未知
來源
IP地址(9) 伺服器名稱 所屬國家
54.169.208.252 ec2-54-169-208-252.ap-southeast-1.compute.amazonaws.com SG
52.19.191.224 ec2-52-19-191-224.eu-west-1.compute.amazonaws.com IE
52.49.232.148 ec2-52-49-232-148.eu-west-1.compute.amazonaws.com IE
52.77.251.90 ec2-52-77-251-90.ap-southeast-1.compute.amazonaws.com SG
52.36.94.35 ec2-52-36-94-35.us-west-2.compute.amazonaws.com US
52.34.28.139 ec2-52-34-28-139.us-west-2.compute.amazonaws.com US
54.86.29.91 ec2-54-86-29-91.compute-1.amazonaws.com US
52.87.231.46 ec2-52-87-231-46.compute-1.amazonaws.com US
52.91.141.62 ec2-52-91-141-62.compute-1.amazonaws.com US
使用者代理字串
Slack-ImgProxy 1.138 (+https://api.slack.com/robots)
首次出現
2016-09-10 07:35:34
最後出現
2016-09-19 05:17:10
遵循robots.txt
未知
來源
IP地址(9) 伺服器名稱 所屬國家
52.77.251.90 ec2-52-77-251-90.ap-southeast-1.compute.amazonaws.com SG
54.169.208.252 ec2-54-169-208-252.ap-southeast-1.compute.amazonaws.com SG
52.19.191.224 ec2-52-19-191-224.eu-west-1.compute.amazonaws.com IE
52.49.232.148 ec2-52-49-232-148.eu-west-1.compute.amazonaws.com IE
52.34.28.139 ec2-52-34-28-139.us-west-2.compute.amazonaws.com US
52.10.39.29 ec2-52-10-39-29.us-west-2.compute.amazonaws.com US
52.37.11.184 ec2-52-37-11-184.us-west-2.compute.amazonaws.com US
52.36.94.35 ec2-52-36-94-35.us-west-2.compute.amazonaws.com US
52.87.231.46 ec2-52-87-231-46.compute-1.amazonaws.com US
使用者代理字串
Slack-ImgProxy 1.106 (+https://api.slack.com/robots)
首次出現
2016-03-23 07:42:39
最後出現
2016-03-23 07:42:39
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
54.169.208.252 ec2-54-169-208-252.ap-southeast-1.compute.amazonaws.com SG
使用者代理字串
Slack-ImgProxy 0.66 (+https://api.slack.com/robots)
首次出現
2016-02-12 15:25:00
最後出現
2016-02-12 12:20:41
遵循robots.txt
未知
來源
IP地址(3) 伺服器名稱 所屬國家
54.164.120.156 ec2-54-164-120-156.compute-1.amazonaws.com US
52.1.172.87 ec2-52-1-172-87.compute-1.amazonaws.com US
54.164.24.49 ec2-54-164-24-49.compute-1.amazonaws.com US
使用者代理字串
Slack-ImgProxy 0.59 (+https://api.slack.com/robots)
首次出現
2015-12-21 11:03:01
最後出現
2015-12-18 13:07:49
遵循robots.txt
未知
來源
IP地址(3) 伺服器名稱 所屬國家
52.0.110.70 ec2-52-0-110-70.compute-1.amazonaws.com US
52.1.172.87 ec2-52-1-172-87.compute-1.amazonaws.com US
54.164.24.49 ec2-54-164-24-49.compute-1.amazonaws.com US
使用者代理字串
Slackbot-LinkExpanding (+https://api.slack.com/robots)
首次出現
2014-10-03 08:35:00
最後出現
2014-02-10 19:54:21
遵循robots.txt
未知
來源
IP地址(1) 伺服器名稱 所屬國家
54.221.168.225 ec2-54-221-168-225.compute-1.amazonaws.com US

訪問控制

瞭解如何控制slackbot訪問許可權,避免slackbot抓取行為不當。

是否攔截slackbot?

對於未知蜘蛛或者爬蟲。它的用途對網站來說可能是好的,也可能是壞的,這取決於它是什麼。所以說,這需要站長進一步分析判斷這些尚不明確的爬蟲行為,再作最終決定。 但,根據以往的經驗,未宣告行為目的及未命名的蜘蛛爬蟲,通常都有不可告人的祕密,我們理應對其行為進行控制,比如攔截。

通過Robots.txt攔截

您可以通過在網站的 robots.txt 中設定使用者代理訪問規則來遮蔽 slackbot 或限制其訪問許可權。我們建議安裝 Spider Analyser 外掛,以檢查它是否真正遵循這些規則。

Plain text
Copy to clipboard
Open code in new window
EnlighterJS 3 Syntax Highlighter
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: slackbot
Disallow: /
# robots.txt # 下列程式碼一般情況可以攔截該代理 User-agent: slackbot Disallow: /
# robots.txt
# 下列程式碼一般情況可以攔截該代理
User-agent: slackbot
Disallow: /

您無需手動執行此操作,可通過我們的 Wordpress 外掛 Spider Analyser 來攔截不必要的蜘蛛或者爬蟲。

更多資訊

Slack採用了幾個robot,用網路上的額外資訊來增強產品。你在這裡可能是因為你在訪問日誌中發現了Slackbot,可能會有一些疑惑。下面的內容則是來幫助您瞭解Slackbot。

認識Slackbot

Slack使用的每個機器人都通過其使用者代理唯一地識別自己。

Slackbot Link Expanding

Plain text
Copy to clipboard
Open code in new window
EnlighterJS 3 Syntax Highlighter
Slackbot-LinkExpanding 1.0 (+https://api.slack.com/robots)
Slackbot-LinkExpanding 1.0 (+https://api.slack.com/robots)
Slackbot-LinkExpanding 1.0 (+https://api.slack.com/robots)

這個機器人對Slack使用者釋出到他們頻道的連結做出反應。它儘可能少地獲取頁面的內容(使用HTTP範圍頭),以提取關於內容的元標籤。具體來說,我們正在尋找oEmbedTwitter Card/Open Graph標籤。如果一個頁面的標籤指向一個圖片、視訊或音訊檔案,我們也會獲取該檔案以檢查其有效性並提取其他後設資料。

一個使用oEmbed的富媒體例子:使用oEmbed的富媒體例子

一個使用Twitter Card/Open Graph標籤嵌入的例子:使用Twitter Card/Open Graph標籤嵌入的例子

對這些請求的迴應在整個服務中被快取了大約30分鐘。你不應該看到我們對同一URL的請求比這更頻繁。更多關於連結展開的工作方式,以顯示摘要內容。

Imgproxy

Plain text
Copy to clipboard
Open code in new window
EnlighterJS 3 Syntax Highlighter
Slack-ImgProxy 0.19 (+https://api.slack.com/robots)
Slack-ImgProxy 0.19 (+https://api.slack.com/robots)
Slack-ImgProxy 0.19 (+https://api.slack.com/robots)

這個機器人用於獲取和快取釋出到Slack頻道的圖片。通過這種方式代理圖片,我們可以隱藏詳細的推薦人資訊(可能包括團隊和/或專案名稱),確保這些圖片通過HTTPS提供,並提高效能。

Slackbot

Plain text
Copy to clipboard
Open code in new window
EnlighterJS 3 Syntax Highlighter
Slackbot 1.0(+https://api.slack.com/robots)
Slackbot 1.0(+https://api.slack.com/robots)
Slackbot 1.0(+https://api.slack.com/robots)

這是我們預設的,什麼都做的。任何時候,如果我們需要做一個不在上述範圍內的HTTP請求,我們就使用這個機器人。例如,為我們整合的服務提出API請求,或傳送使用者在其團隊中配置的Outgoing Webhooks。

對Slackbot有意見?

由於爬蟲是由Slack團隊(不完美的人類)指揮機器人,他們完全有可能做一些他們不應該做的事情。Slack非常樂意將你的網站新增到阻止列表/允許列表中,或回答你關於我們機器人的問題。請聯絡我們,或給Slack發一條推特@slackapi。

Slackbot目前不遵循 robots.txt 檔案。在實施和試驗這樣做之後,Slack收到了太多來自使用者的抱怨,因為網際網路的很大一部分是爬蟲無法訪問的。由於Slack不是爬蟲(Slack不跟蹤連結,而且Slack是代表人類行事),停止像處理爬蟲一樣處理robots.txt檔案是合理的。如果您仍然希望您的網站被阻擋在slack.com的嵌入物之外,或者希望改變您的嵌入物的顯示方式,請聯絡Slack

常見蜘蛛/爬蟲

Common Spiders
Fraunhofer crawler
Fraunhofer crawler蜘蛛/爬蟲屬於其他型別,由Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Fraunhofer crawler基本資訊,使用者代理和訪問控制等。
companyspotter
companyspotter蜘蛛/爬蟲屬於其他型別,由CompanySpotter BV開發執行。您可以繼續閱讀下方資訊,以深入瞭解companyspotter基本資訊,使用者代理和訪問控制等。
DataForSeo bot
DataForSeo bot蜘蛛/爬蟲屬於其他型別,由DataForSEO OU開發執行。您可以繼續閱讀下方資訊,以深入瞭解DataForSeo bot基本資訊,使用者代理和訪問控制等。
CloudFlare crawler
CloudFlare crawler蜘蛛/爬蟲屬於其他型別,由CloudFlare, Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解CloudFlare crawler基本資訊,使用者代理和訪問控制等。
Odin
Odin蜘蛛/爬蟲屬於其他型別,由Cyble, Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Odin基本資訊,使用者代理和訪問控制等。
Chrome Privacy Preserving Prefetch Proxy
Chrome Privacy Preserving Prefetch Proxy蜘蛛/爬蟲屬於其他型別,由Google Inc.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Chrome Privacy Preserving Prefetch Proxy基本資訊,使用者代理和訪問控制等。
EFF crawler
EFF crawler蜘蛛/爬蟲屬於其他型別,由Electronic Frontier Foundation開發執行。您可以繼續閱讀下方資訊,以深入瞭解EFF crawler基本資訊,使用者代理和訪問控制等。
Modat crawler
Modat crawler蜘蛛/爬蟲屬於其他型別,由Modat B.V.開發執行。您可以繼續閱讀下方資訊,以深入瞭解Modat crawler基本資訊,使用者代理和訪問控制等。

相關文章

Related Articles