Cloudflare đã chính thức công bố thông tin chi tiết về sự cố diện rộng xảy ra vào ngày thứ Ba, khiến hàng loạt dịch vụ lớn như ChatGPT, X, Downdetector và nhiều nền tảng web khác gặp lỗi trong nhiều giờ. Sự cố được CEO Matthew Prince mô tả là “tồi tệ nhất kể từ năm 2019”, bắt nguồn từ lỗi trong hệ thống Bot Management của Cloudflare.
Nguyên nhân sự cố và tác động đến các dịch vụ
Theo giải thích, lỗi xuất phát từ thay đổi trong hệ thống phân quyền của cơ sở dữ liệu, dẫn đến một truy vấn mới trên ClickHouse tạo ra số lượng lớn dữ liệu trùng lặp trong file cấu hình bot. Khi file này vượt quá giới hạn bộ nhớ, nó làm quá tải hệ thống proxy – nơi xử lý lưu lượng cho khách hàng sử dụng module Bot Management.
Hệ quả là các quy tắc chặn bot đã ngừng hoạt động đúng cách, trả về nhiều kết quả sai và vô tình chặn luôn lưu lượng hợp lệ. Những khách hàng không dùng tính năng đánh điểm bot vẫn hoạt động bình thường, trong khi các dịch vụ phụ thuộc vào lớp bảo vệ này đồng loạt gián đoạn.
Cloudflare khẳng định sự cố không liên quan đến DNS, công nghệ AI Labyrinth hay bất kỳ cuộc tấn công mạng nào. Công ty nêu 4 hướng khắc phục lâu dài, bao gồm tăng cường cơ chế xử lý file cấu hình, bổ sung kill switch toàn cầu, ngăn lỗi dump dữ liệu gây quá tải và rà soát cách các module proxy xử lý lỗi để tránh sập dây chuyền.
Sự cố một lần nữa cho thấy mức độ phụ thuộc ngày càng lớn của internet vào các nền tảng trung gian, đồng thời đặt ra yêu cầu giám sát và kiểm thử nghiêm ngặt hơn với những thay đổi trong hạ tầng cốt lõi.
