Bốn tín hiệu vàng
Saturation chạm trần khi latency và errors còn hoàn hảo. Client tăng 8 lần, thông lượng chỉ +8%, còn p99 gấp 15,6 lần.
#quan-sat
25 bài viết
SLI và ngân sách lỗi
Cùng một sự cố, ba cách tính SLI cho ba kết luận: vi phạm SLO, đạt SLO, và không có chuyện gì xảy ra.
Bảng điều khiển nặng
40 panel làm tươi mỗi 10 giây tốn 12% một nhân cho mỗi người xem. Và sum by không làm Prometheus nhẹ đi chút nào.
Lưu chỉ số dài hạn
Prometheus nén còn 2,16 byte mỗi mẫu. Nhưng giảm mẫu bằng trung bình xoá mất 84% chiều cao đỉnh — 939 ms còn 150 ms.
Trace bốn chặng
Hai sự cố khác hẳn nhau, metric ở dịch vụ đầu chỉ cho một con số. Trace chỉ thẳng svc-c: tự làm 101,45 ms trong khi ba chặng kia đều 10 ms.
OpenTelemetry
BatchSpanProcessor mặc định vứt 62,5% số span khi dịch vụ chạy nhanh — và chỉ ghi một dòng log. Dịch vụ càng nhanh càng mất nhiều trace.