Microsoft khôi phục Microsoft 365 sau sự cố gần một ngày

Sau gần một ngày chập chờn, Microsoft 365 đã hoạt động trở lại. Trang trạng thái của Microsoft ghi nhận dịch vụ tiêu dùng khôi phục hoàn toàn vào 16:10 UTC ngày 13/11, tức 23:10 giờ Việt Nam cùng ngày, và bản cập nhật cuối lúc 04:17 UTC ngày 14/11 khẳng định dịch vụ đã ổn định trên các môi trường từng bị ảnh hưởng. Tồn đọng email tích lũy trong thời gian sự cố cũng đã được xử lý xong.

Sự cố bắt đầu từ chiều 12/11 theo giờ UTC, khi Exchange Online — dịch vụ email đám mây đứng sau Outlook — gặp trục trặc và nhanh chóng lan sang Teams, Copilot, SharePoint, OneDrive cùng nhiều tính năng khác của Microsoft 365. Tại Việt Nam, sự cố rơi đúng vào giờ làm việc ngày 13/11, thời điểm nhiều doanh nghiệp đang dùng Outlook để trao đổi email và Teams để họp trực tuyến.

Sự cố lan tới 74 quốc gia, hơn 7,4 triệu lượt báo lỗi

Quy mô của sự cố thể hiện rõ qua số liệu từ Downdetector, nền tảng theo dõi sự cố dựa trên báo cáo của người dùng. Reuters cho biết nền tảng này ghi nhận hơn 7,4 triệu lượt báo cáo trên toàn thế giới trong suốt sự cố, có thời điểm gần 20.000 báo cáo mỗi phút.

Riêng với Outlook, số lượt báo lỗi đạt đỉnh 138.058 vào khoảng 13:00 giờ miền Đông nước Mỹ ngày 12/11, rồi giảm còn 34.490 vào tối cùng ngày khi Microsoft bắt đầu khôi phục dịch vụ. Báo cáo lỗi Microsoft 365 nói chung cũng giảm xuống còn gần 13.000 vào 17:47 giờ miền Đông, trong khi Teams ghi nhận 763 lượt báo lỗi cùng thời điểm.

Phạm vi ảnh hưởng không dừng ở email và họp trực tuyến. Sự cố làm gián đoạn hoạt động của doanh nghiệp, trường học, cơ quan nhà nước và hãng hàng không tại ít nhất 74 quốc gia và vùng lãnh thổ, trong đó có Mỹ. Một số hãng hàng không Ấn Độ đã phải ra khuyến cáo hành khách vì email hỗ trợ bị gián đoạn. Thậm chí các đầu nối dịch vụ AI mà OpenAI và Anthropic dùng cũng bị ảnh hưởng theo.

Nguyên nhân là lỗi nâng cấp mạng, không phải tấn công mạng

Trong tuyên bố đăng trên X vào thứ Sáu, Microsoft cho biết sự cố bắt nguồn từ một vấn đề kỹ thuật trong đợt nâng cấp dung lượng mạng trước đó, bộc lộ sau một thay đổi mạng gần đây. Hãng nhấn mạnh đây không phải tấn công mạng và cũng không liên quan tới các tác nhân AI, dập tắt những đồn đoán lan truyền trên mạng trong lúc sự cố diễn ra.

“Chúng tôi vô cùng xin lỗi vì sự gián đoạn mà sự cố này gây ra cho khách hàng và đối tác. Chúng tôi biết niềm tin mà họ đặt vào dịch vụ của chúng tôi và coi trọng trách nhiệm đó một cách nghiêm túch”, Microsoft viết trong tuyên bố. Hãng cho biết đang thấy dịch vụ phục hồi rộng khắp và ổn định trở lại.

Đáng chú ý, những biện pháp khắc phục đầu tiên của Microsoft đã không phát huy tác dụng như kỳ vọng trong ngày 13/11, buộc đội kỹ thuật phải tìm hướng xử lý khác. Trang trạng thái của hãng mô tả triệu chứng ban đầu: tiến trình chịu trách nhiệm thiết lập kết nối bảo mật trên các máy chủ bị ảnh hưởng đã bị quá tải và ngừng xử lý yêu cầu. Microsoft cho biết đã xử lý xong nguyên nhân gốc rễ và đang khôi phục dịch vụ cho các khách hàng, khu vực còn lại.

Microsoft khôi phục dần từng bước và xin lỗi người dùng

Thay vì bật lại toàn bộ hệ thống cùng lúc, Microsoft cho biết đã khôi phục dịch vụ dần dần, kiểm tra độ ổn định ở từng giai đoạn vì quy mô nhu cầu quá lớn. Cách làm này khiến quá trình kéo dài hơn, nhưng theo hãng, nó giúp đảm bảo việc khôi phục được ổn định.

Với người dùng cá nhân, Microsoft xác nhận dịch vụ đã khôi phục hoàn toàn và tồn đọng email đã xử lý xong. Với khách hàng doanh nghiệp, hãng vẫn đang theo dõi quá trình khôi phục kéo dài để chắc chắn không cần thêm biện pháp khắc phục nào. Trong thời gian sự cố, Microsoft đã kéo dài cửa sổ chờ đối với email bị chậm lên 48 giờ để thư không bị mất.

Hãng cũng khẳng định sẽ công bố báo cáo sự cố đầy đủ sau khi hoàn tất việc rà soát nội bộ. Báo cáo này được chờ đợi vì đây là một trong những sự cố Microsoft 365 kéo dài nhất trong nhiều năm, và giới chuyên môn muốn biết chính xác điều gì đã trục trặc trong đợt nâng cấp mạng đó.

Người dùng cần làm gì sau sự cố

Người dùng Outlook nên kiểm tra lại hộp thư đến và thư đã gửi trong hai ngày 12 và 13/11, vì một số email có thể đến muộn hoặc nằm trong hàng đợi đã được xử lý. Nếu email quan trọng chưa tới, hãy kiểm tra thư mục spam và liên hệ người gửi trước khi cho rằng thư đã mất.

Không cần cài đặt lại Office hay thay đổi bất kỳ thiết lập nào trên máy, vì sự cố nằm ở phía máy chủ của Microsoft chứ không phải ở thiết bị người dùng. Với doanh nghiệp, quản trị viên có thể theo dõi trang trạng thái Microsoft 365 để nắm cập nhật cuối cùng và chờ báo cáo sự cố đầy đủ của hãng.

Sự cố lần này cũng là lời nhắc cho các tổ chức phụ thuộc hoàn toàn vào một bộ công cụ đám mây: khi Outlook và Teams cùng tê liệt, email, lịch họp và tài liệu chia sẻ đều dừng lại cùng lúc. Doanh nghiệp nên có sẵn kênh liên lạc dự phòng, chẳng hạn một ứng dụng nhắn tin khác hoặc số điện thoại liên hệ khẩn cấp, để công việc không bị đứt đoạn nếu sự cố tương tự lặp lại.

Sự cố Microsoft 365 đã khép lại với dịch vụ trở lại bình thường, nhưng câu hỏi về độ tin cậy của hạ tầng đám mây vẫn còn đó. Báo cáo sự cố đầy đủ mà Microsoft hứa công bố sẽ là thước đo cho thấy hãng rút ra được gì từ gần một ngày tê liệt này.

Nguồn tham khảo: Microsoft

Bài liên quan: Microsoft 365 sập toàn cầu, Outlook và Teams tê liệt ngày thứ hai