@
AkideLiu 10:43 PM PDT 我们正在调查 AP-EAST-1 区域中 EC2 API 错误率上升的原因
10:51 PM PDT 我们确认在 AP-EAST-1 区域内的单个可用区中 EC2 API 的错误率上升和 某些 EBS 卷的性能下降
11:08 PM PDT 我们持续调查 EC2 API 的错误率增加、部分 EBS 卷的性能下降以及 AP-EAST-1 区域中单个可用区 (ape1-az2) 内的 EC2 实例连接问题。AP-EAST-1 区域内的其他可用区不受此事件的影响。
11:27 PM PDT 我们持续调查 EC2 API 的错误率增加、部分 EBS 卷的性能下降以及 AP-EAST-1 区域中单个可用区 (ape1-az2) 内的 EC2 实例连接问题。 我们正在确认此事件的根本原因,但现阶段还无法确定。由于 AP-EAST-1 区域内的其他可用区不受此事件的影响,我们建议您暂时不要使用受影响的可用区。
12:03 AM PDT 我们持续调查 EC2 API 的错误率增加、部分 EBS 卷的性能下降以及 AP-EAST-1 区域中单个可用区 (ape1-az2) 内的 EC2 实例连接问题。 我们正在确认此事件的根本原因,我们认为这与 EC2 实例和附加 EBS 卷之间的通信有关。这会导致可用区内受影响 EBS 卷的性能下降,进而发生操作系统内的 IO 卡住而导致 EC2 实例受损。在我们继续努力解决问题的同时,我们建议您从受影响的可用区进行故障转移。
12:47 AM PDT 我們已確定導致 EC2 API 的錯誤率增加、AP-EAST-1 區域中某些 EBS 磁碟區和 EC2 實例連線問題的效能降低問題的根本原因。在受影響的可用區內的某些 EBS 儲存伺服器受損,導致受影響的 EBS 磁碟區效能降低。我們正在採取措施解決 EBS 儲存伺服器損害,這應該能開始解決受影響的 EC2 實例和 EBS 磁碟區的問題。在我們繼續努力解決問題的同時,我們建議您暫時不要使用受影響的可用區。
12:57 AM PDT 我們持續看到受影響的可用性區域內 EBS 磁碟區的效能降低。絕大多數受影響的 EBS 磁碟區現在已經復原,我們正在處理剩餘的 EBS 磁碟區。雖然大部分的服務現在都在受影響的可用性區域內看到復原,但我們還是不建議在完成完整復原之前,還是不建議回復至可用區域。我們將繼續為您提供更新。 我們已經開始採取措施來解決 EBS 儲存伺服器問題,並且正在看到某些受影響的 EBS 磁碟區的復原。我們將繼續處理剩餘的受損 EBS 儲存伺服器,以完全解決問題.
1:27 AM PDT 我们继续看到受影响的可用区内 EBS 卷的性能下降。大多数受影响的 EBS 卷现已恢复,我们将继续努力恢复其余受影响的卷。我们继续努力争取全面解决这个问题 | 我們持續看到受影響的可用性區域內 EBS 磁碟區的效能降低。大部分受影響的 EBS 磁碟區現在都已經復原,我們會繼續修復其餘受影響的磁碟區。我们继续努力全面解决这一问题
1:53 AM PDT 我们继续看到受影响的可用区内 EBS 卷的性能下降。绝大多数受影响的 EBS 卷现已恢复,我们正在处理剩余的 EBS 卷。虽然大多数服务现在都在受影响的可用区内看到恢复,但我们建议在完成完全恢复之前,不要回到可用区。我们将继续为您提供最新信息. 我们已开始采取措施来解决 EBS 存储服务器损坏问题,并且看到一些受影响的 EBS 卷正在恢复。我们将继续处理剩余受损的 EBS 存储服务器,以充分解决此问题。
2:36 AM PDT 从 12:58 PM UTC+8 开始,在 AP-EAST-1 地区的一个可用区( ape1-az2 )内,我们遇到了 EC2 APIs 的错误率增加、一些 EBS 卷的性能下降和 EC2 实例连接问题。该问题的根本原因是受影响的可用性区域内底层 EBS 存储服务器的性能下降。工程师采取了行动,缓解和解决 EBS 存储服务器性能下降的问题,从而解决了这个问题。在 03:45 PM UTC+8 性能下降的 EBS 卷开始恢复,到 03:58 PM UTC+8,绝大部分受影响的 EBS 卷已经恢复。我们继续在少数仍在经历性能下降的 EBS 卷上工作,并将通过个人健康仪表板或这些卷提供进一步的更新。所有的服务现在都在受影响的可用性区域内正常运行。这个问题已经得到解决,服务运行正常。