Most Outages Don't Announce Themselves

Outages often don't announce themselves — they appear as slowly rising latency or creeping error rates while no one is watching. Effective monitoring starts with establishing baselines so alerts fire on meaningful deviations, not static thresholds. Monitoring outcomes from the user's perspective (synthetic transactions like login or checkout flows) beats checking individual components in isolation. Data from 1.8 million outages shows ~68% start outside business hours, and while the median outage lasts under two minutes, a long tail of multi-hour failures demands alert design that accounts for rare, prolonged events. Alert fatigue is addressed through weekly alert review sessions to deliberately reduce noise, and anomaly detection should require a duration threshold before paging anyone.

Nguồn: https://devops.com/most-outages-dont-announce-themselves. 8sync News chỉ tóm tắt và dẫn link; bản quyền nội dung thuộc tác giả và nguồn gốc.

Đề xuất cho bạn

freeCodeCamp2 Hot23 phút13 giờ trướcAI

The Hidden Engineering Behind Every AI Product: What Software Engineers Should Know

Hệ thống AI sản xuất đòi hỏi nhiều lớp hạ tầng phức tạp hơn là một vòng lặp prompt-to-response đơn giản, bao gồm xác thực, quản lý phiên bản prompt, pipeline RAG có lọc quyền, đánh giá đầu ra, quan sát hệ thống (token usage, retrieval quality) và quy trình triển khai an toàn (canary releases, rollbacks). Bài viết cung cấp kiến trúc tham khảo, ví dụ pseudocode, cùng checklist sẵn sàng sản xuất bao gồm phạm vi sản phẩm, dữ liệu/truy xuất, bảo mật, đánh giá, quan sát và triển khai.

Lập trình viên nên đọc bài này để hiểu cách xây dựng không chỉ mô hình AI mà là hệ sinh thái kỹ thuật toàn diện, từ bảo mật đến giám sát, giúp họ tạo ra sản phẩm AI thực sự đáng tin cậy và hiệu quả trong môi trường sản xuất.