Nội dung bài viết
Vicki Brady nói với các nhân viên bảo trì của các thượng nghị sĩ rằng họ không biết về nguy cơ ngừng hoạt động hàng loạt do lỗi phần mềm nghiêm trọng 'gây ra sự hỗn loạn trên toàn mạng'. Nhận email tin nóng, ứng dụng miễn phí hoặc podcast tin tức hàng ngày của chúng tôi.
Telstra đã đổ lỗi cho việc thiếu bản cập nhật phần mềm trên hệ thống lưu giữ thời gian quan trọng là nguyên nhân gây ra sự hỗn loạn trên toàn quốc vào tuần trước, đồng thời các nhóm bảo trì của họ cũng không biết về sự thay đổi thiết kế đã ảnh hưởng đến cách thiết lập lại hệ thống.
Giám đốc điều hành của Telstra, Vicki Brady, đã phát biểu trong một cuộc điều tra của Thượng viện về việc ngừng hoạt động di động vào thứ Sáu rằng 45% tất cả các cuộc gọi và phiên dữ liệu vào thứ Tư tuần trước đã bị ảnh hưởng khi mạng ngừng hoạt động ngay trước 4h30 sáng AEST.
Telstra cho biết mạng lưới của họ không thiếu sự dư thừa – nhưng sự dư thừa đó không ngăn được tình trạng ngừng hoạt động.
Trong bản đệ trình và điều trần, các giám đốc điều hành xác nhận đã báo cáo rằng một trong ba máy chủ giao thức thời gian mạng (NTP) của Telstra, được thiết kế để đảm bảo hệ thống có thời gian chính xác, đã được đặt lại về năm 2006. Brady xác định máy chủ là mẫu Microchip có tên SSU 2000.
Nó được sản xuất vào năm 2011 và có giá 30.000 USD để thay thế. Telstra có ba ở Sydney, Melbourne và Perth.
Nó vẫn được hỗ trợ bởi Thiết bị khoa học nh... Tôi biết rằng vấn đề không phải ở phần cứng – mà là do công ty viễn thông chưa áp dụng bản cập nhật phần mềm.
Trong quá trình bảo trì để thay thế nguồn điện dự phòng bị lỗi, công ty đã tắt và khởi động lại máy chủ ở Melbourne. Do “cấu hình phần mềm cơ bản” trong máy chủ, nó đã khởi động lại sai ngày 2006.
Telstra cho biết: “Trong vài giờ tiếp theo, ngày không chính xác lan truyền chậm trên mạng, khiến chứng chỉ xác thực trong các máy chủ khác trở nên không hợp lệ”.
“Khách hàng thỉnh thoảng không thể xác thực trên mạng (“không có dịch vụ”), điều này ảnh hưởng đến khả năng thực hiện cuộc gọi thoại và sử dụng dữ liệu trên mạng di động của Telstra.” Các giám đốc điều hành tiết lộ rằng ngoài việc máy chủ mất khả năng giao tiếp với máy chủ ở các địa điểm khác, trong cả năm 2022 và tháng 1 năm nay, công ty đã được nhà sản xuất cảnh báo rằng cần phải cập nhật phần mềm.
Họ cho biết nếu bản cập nhật được áp dụng thì tình trạng ngừng hoạt động có thể tránh được. Telstra cũng đã cố ý thay đổi thiết kế của thiết bị để khắc phục lỗi trước đó, nhưng điều này chưa được ghi chép đầy đủ để các nhân viên bảo trì biết.
Giám đốc điều hành của công ty về khả năng phục hồi từ đầu đến cuối, Gerard Tracey cũng nói rằng nếu Telstra đầu tư vào một phần cứng mới hoạt động theo cùng thiết kế như dự định thì tình trạng ngừng hoạt động có thể đã không xảy ra.
Tờ trình cũng cho biết khi máy chủ Melbourne NTP ngắt kết nối để bảo trì, 2 máy chủ còn lại hoạt động dự phòng và sao lưu như mong đợi. Telstra cho biết: “Chế độ lỗi ở đây vốn không liên quan đến phần cứng, mức độ dự phòng hoặc kiến trúc mạng của chúng tôi”.
Nhưng khi máy chủ Melbourne cung cấp ngày không chính xác sau khi bật lại, “các hệ thống hạ nguồn đã sử dụng ngày đó trong các quy trình bảo mật, xác thực, phiên và kiểm soát chính sách”.
“Do đó, vấn đề không chỉ đơn giản là việc mất một máy chủ NTP hay sự dư thừa trong thiết kế cấu hình của ba máy chủ NTP, mà còn là việc truyền bá và chấp nhận thông tin ngày sai bởi các hệ thống được kết nối dựa vào thời gian làm tham chiếu tin cậy và đặt hàng.” Telstra cho biết nguyên nhân gây ra sự cố mất điện là không thể chấp nhận được và cho rằng các biện pháp kiểm soát chưa đủ tốt.
Brady nói với cuộc điều tra rằng Telstra sẽ chịu hoàn toàn trách nhiệm về việc ngừng hoạt động.
Gợi ý thực hành:
1. Theo dõi thông báo từ cơ quan địa phương tại California.
2. Kiểm tra nguồn chính thức trước khi chia sẻ lại thông tin.