前幾天 AWS 的 us-east-1 出事報告
source link: https://blog.gslin.org/archives/2021/12/14/10461/%e5%89%8d%e5%b9%be%e5%a4%a9-aws-%e7%9a%84-us-east-1-%e5%87%ba%e4%ba%8b%e5%a0%b1%e5%91%8a/
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
前幾天 AWS 的 us-east-1 出事報告
AWS 放出前幾天 us-east-1 出事的報告了：「Summary of the AWS Service Event in the Northern Virginia (US-EAST-1) Region」，Hacker News 上的討論「Summary of the AWS Service Event in the Northern Virginia (US-East-1) Region (amazon.com)」也可以看一下，裡面也有人提到儘量閃開 us-east-1。
而爆炸當天的討論「AWS us-east-1 outage (amazon.com)」也可以看一看，裡面還有聊到企業文化的問題...
AWS 的 us-east-1 除了是 AWS 最早的區域以外，也是目前 AWS 內功能最多的區域 (大多數新功能在第一波都會開放 us-east-1 使用)，然後也是最便宜的區域，所以會有很多人都用這個區域提更服務。
也因為這樣，這個區域也是 AWS 內最大的區域，加上 AWS 是目前最大的公有雲，導致了這個區域的很多東西會遇到以前的人都沒遇過的問題，大概每年 (或是每兩年) 就會有一次比較嚴重的 outage，算是為了價錢而選擇 us-east-1 的人要注意的。
說到價錢，如果是為了找價錢比較低的區域，另外一個可以考慮選擇是 us-west-2，出新功能與新產品時也常常會被放進第一波，目前看起來的歷史記錄應該是比 us-east-1 好不少...
這次出問題的主要是內部控制用的網路 (被稱為 internal network) 擁塞，而非客戶在用的網路 (被稱為 main network)：
To explain this event, we need to share a little about the internals of the AWS network. While the majority of AWS services and all customer applications run within the main AWS network, AWS makes use of an internal network to host foundational services including monitoring, internal DNS, authorization services, and parts of the EC2 control plane.
後面也有提到因為壅塞而導致 monitoring 系統受到影響，只能就手上的 log 去分析猜測，然後逐步排除問題，而 deployment 系統也使用內部網路，所以更新的速度也快不起來...
不過基本上可以預期明年或是後年應該還是會再來一波...
Related
AWS 推出 CloudShell
AWS 推出了 CloudShell，讓使用者可以繼承 IAM 的權限，在瀏覽器裡面用 command line 操作 AWS 資源：「AWS CloudShell – Command-Line Access to AWS Resources」。 使用方式很簡單，在 web console 上方的 icon 點下去就可以用了，只是第一次使用的時候會看到需要建立環境的訊息，會等比較久： 連進去後測了一下，看起來是跑一個 30GB Disk 與 4GB RAM 的 container 起來，/dev/cpuinfo 裡面可以看到是 Intel E5-2676 v3 的機器，以這個資訊來查，看起來可能是 m4 系列的機器。 網路的部份基本上對 internet 的 TCP 與 UDP 都可以通，但需要操作 raw socket 丟 ICMP…
December 19, 2020In "AWS"
Amazon EC2 推出 AMD 版本的 C5a 主機
前幾天 AWS 宣佈了使用 AMD CPU 的 c5a 主機：「New – Amazon EC2 C5a Instances Powered By 2nd Gen AMD EPYC™ Processors」。 定價上與其他 AWS 上 AMD 的機器都類似 (m5a、r5a 以及 t3a)，大約都低 10% 左右： Today, I am excited to announce the general availability of compute-optimized C5a instances featuring 2nd Gen AMD EPYC™ processors, running…
June 7, 2020In "AWS"
AWS 推出了 AWS Network Firewall
AWS 推出了 AWS Network Firewall，可以在 VPC 層做更多細緻的設定了：「AWS Network Firewall – New Managed Firewall Service in VPC」。 本來的 Network ACLs 的設計也是對 VPC 做過濾，但就是很標準的 stateless filtering： Network ACLs are stateless, which means that responses to allowed inbound traffic are subject to the rules for outbound traffic (and vice versa). 而這次推出的 AWS Network…
November 26, 2020In "AWS"
Leave a Reply Cancel reply
Your email address will not be published. Required fields are marked *
Comment
Name *
Email *
Website
Notify me of follow-up comments by email.
Notify me of new posts by email.
To respond on your own website, enter the URL of your response which should contain a link to this post's permalink URL. Your response will then appear (possibly after moderation) on this page. Want to update or remove your response? Update or delete your post and re-enter your post's URL again. (Learn More)
Post navigation
Recommend
About Joyk
Aggregate valuable and interesting links.
Joyk means Joy of geeK