Google đã xin lỗi vì sự cố mất điện nghiêm trọng mà công ty cho biết là do nhiều lớp cập nhật gần đây bị lỗi.
Hơn 70 dịch vụ đám mây của Google ngừng hoạt động bình thường trên toàn cầu vào cuối tuần qua, làm sập hoặc làm gián đoạn hàng chục dịch vụ của bên thứ ba, bao gồm Cloudflare, OpenAI vàShopify. Gmail, Google Calendar, Google Drive, Google Meet và các sản phẩm của bên thứ nhất khác cũng gặp trục trặc.
“Chúng tôi vô cùng xin lỗi vì tác động của sự cố mất điện này”, Google viết trong báo cáo sự cố. “Khách hàng và người dùng của Google Cloud tin tưởng giao phó doanh nghiệp của họ cho Google, và chúng tôi sẽ làm tốt hơn. Chúng tôi xin lỗi vì tác động của sự cố này không chỉ đối với doanh nghiệp và người dùng của khách hàng mà còn đối với lòng tin vào hệ thống của chúng tôi. Chúng tôi cam kết sẽ cải thiện để giúp tránh những sự cố mất điện như thế này trong tương lai”.
Thomas Kurian, CEO của đơn vị đám mây của Google, cũng đã đăng về sự cố này trong bài đăng trên X vào thứ năm, nói rằng “chúng tôi rất tiếc về sự gián đoạn này gây ra cho khách hàng”.
Vào tháng 5, Google đã thêm một tính năng mới vào “kiểm tra chính sách hạn ngạch” để đánh giá các yêu cầu đến tự động, nhưng tính năng mới này không được thử nghiệm ngay lập tức trong các tình huống thực tế, công ty đã viết trong báo cáo sự cố. Do đó, hệ thống của công ty không biết cách xử lý đúng dữ liệu từ tính năng mới, bao gồm các mục nhập trống. Sau đó, các mục nhập trống đó được gửi đến tất cả các vùng trung tâm dữ liệu của Google Cloud, dẫn đến sự cố.
Theo công ty, các kỹ sư đã tìm ra vấn đề trong 10 phút. Tuy nhiên, toàn bộ sự cố kéo dài trong 7 giờ sau đó, với vụ tai nạn dẫn đến tình trạng quá tải ở một số khu vực lớn hơn.
Khi phát hành tính năng này, Google đã không sử dụng cờ tính năng, một thông lệ ngày càng phổ biến trong ngành cho phép triển khai chậm để giảm thiểu tác động nếu có sự cố xảy ra. Google cho biết cờ tính năng sẽ phát hiện ra sự cố trước khi tính năng này được phổ biến rộng rãi.
Trong tương lai, Google sẽ thay đổi kiến trúc của mình để nếu một hệ thống bị lỗi, nó vẫn có thể hoạt động mà không bị sập. Google cho biết họ cũng sẽ kiểm tra tất cả các hệ thống và cải thiện thông tin liên lạc của mình “cả tự động và con người, để khách hàng của chúng tôi có được thông tin họ cần càng sớm càng tốt để phản ứng với các vấn đề”.
Anh Nguyễn
