Tám giờ bốn mươi ba phút, sáng thứ Hai
Một toà nhà văn phòng Grade A khu trung tâm. Sáng thứ Hai đầu tuần, sảnh chính đang đón ca cao điểm nhân viên vào làm. Năm thang máy chính chạy đều. Hệ access control đang đọc thẻ với tốc độ vài chục lần mỗi giây. Trung tâm Điều hành Toà nhà ở tầng kỹ thuật có ba người trực, mắt theo dõi mười hai màn hình giám sát.
Sáng nay có hai sự kiện trên lịch: chín giờ là buổi đón đoàn đối tác đến due diligence cho một tenant đang chuẩn bị niêm yết, mười giờ là buổi town hall của tenant đa quốc gia lớn nhất toà nhà với điểm cầu khắp châu Á - Thái Bình Dương.
Lúc 8h43, một dòng đèn báo trên dashboard Trung tâm Điều hành chuyển từ xanh sang vàng. Hệ visitor management ở sảnh chính nháy lần một, tự khôi phục, rồi nháy lần hai và treo. Tại quầy lễ tân, hai chiếc iPad đón khách đột nhiên không phản hồi. Cô lễ tân thử bấm reset, không có hiệu lực. Đoàn đối tác Hàn Quốc dự kiến đến lúc 8h55.
Đội kỹ thuật trực chạy xuống sảnh. Trên đường đi, họ nhận được điện thoại từ phòng AV: hệ video conferencing chuẩn bị cho buổi town hall mười giờ vừa mất kết nối với điểm cầu Singapore, encoder báo lỗi. Cùng lúc, trên dashboard NOC của tenant lớn nhất, một switch tầng vừa reboot, một số nhân viên trên tầng đó báo Wi-Fi chậm. Trên màn hình điều hành an ninh, hai camera ở khu vực bãi đỗ chuyển sang trạng thái offline rồi trở lại sau hai giây.
Không có gì hỏng thật sự. Mọi thiết bị tự khôi phục trong vòng năm đến chín mươi giây. Đoàn đối tác Hàn Quốc đến lúc 8h57, được đón bằng quy trình thủ công, lễ tân in thẻ visitor bằng máy in dự phòng. Buổi town hall bắt đầu chậm ba phút.
Sau hai ngày điều tra, nguyên nhân được xác định: tủ điều hoà của tầng tin học khởi động đồng loạt với một máy phát điện đang được test định kỳ tại tầng hầm theo lịch sáng thứ Hai. Hai cú khởi động cùng pha sinh ra một xung lan truyền vài chục microsecond vào trục cấp điện tầng kỹ thuật, ảnh hưởng đồng thời ba cụm thiết bị nhạy được cấp từ trục đó.
Trên báo cáo gửi Tổng giám đốc tenant và Ban Quản lý Toà nhà, có một dòng: "Sự kiện chuỗi sự cố ngắn 8h43 sáng thứ Hai. Đề nghị rà soát thiết kế lọc nguồn cho lớp hạ tầng số.".
