- Sự kiện thô (raw event): một thông báo Pulse nhận được, như một cảnh báo Datadog hoặc một CloudWatch alarm.
- Signal: sự kiện còn lại sau bước lọc nhiễu.
- Sự kiện bị lọc (suppressed event): sự kiện Pulse đánh giá là nhiễu nhưng vẫn giữ lại để đếm (Rate limit, Snooze và Verdict). Bản trùng lặp bị loại bỏ thì không được giữ lại.
- Sự kiện được lưu (stored events): Signal cộng với sự kiện bị lọc.
- Cluster: một nhóm Signal liên quan mà Pulse xem như một vấn đề.
- Đạt kết quả (reached an outcome): Signal có Cluster đã được liên kết với một sự cố hoặc đã được giải quyết. Correlation yield và cột Clusters routed đều đếm theo tiêu chí này (bao gồm cả Cluster tự đóng, xem Cluster tự giải quyết).
Mở phân tích Pulse
1
Vào Insights
Trên thanh bên, mở Resolve → Insights, trong mục Analytics. Các vai trò Admin, Developer và Viewer của workspace đều mở được.
2
Chọn tab Pulse
Nhấn tab Pulse analysis. Các tab còn lại (Overview, Accuracy & trust, Runbook analytics) được mô tả trong Resolve insights.
3
Đặt khoảng thời gian
Dùng bộ chọn khoảng thời gian ở góc trên bên phải. Các tùy chọn từ Last 1 hour đến Last 30 days. Mặc định là Last 7 days. Mỗi thẻ lọc theo một mốc thời gian khác nhau, liệt kê trong cột Khoảng thời gian lọc theo ở bảng bên dưới. Một Cluster hình thành cách đây 8 ngày và được giải quyết hôm qua sẽ không có trong Cluster MTTR khi chọn Last 7 days, nhưng các Signal của Cluster đó trong 7 ngày gần nhất vẫn được tính vào Correlation yield.Trạng thái thành công: bốn thẻ số liệu xuất hiện, tiếp theo là bảng Top noisy sources. Nếu không có sự kiện nào đến trong khoảng thời gian đó, bảng hiển thị “No signals ingested in this period”.
Ý nghĩa của từng số liệu
Vì có bản trùng lặp bị loại bỏ, Signals ingested thường lớn hơn số sự kiện được lưu làm cơ sở cho các thẻ khác.
Cluster MTTR là trung vị tính trên các Cluster. Mean time to resolve trên tab Overview là trung bình tính trên các sự cố. Hai số này thường khác nhau.
Cluster tự giải quyết
Cluster không có Signal mới trong 12 giờ sẽ tự đóng và được tính là đã giải quyết. Điều này ảnh hưởng đến ba số liệu:- Correlation yield và Clusters routed tính Cluster đó là đã đạt kết quả, kể cả khi không ai xem. Yield cao nghĩa là cảnh báo đã gom vào các Cluster đã kết thúc, không có nghĩa là mọi cảnh báo đều quan trọng. Hãy đọc số này cùng với làn Routed trên Resolve → Pulse, nơi chỉ hiển thị các Cluster đã liên kết với sự cố.
- Cluster MTTR đo Cluster đó đến thời điểm tự đóng, không phải đến Signal cuối cùng.
Noise suppressed không phải cùng một số với Noise reduced trên tab Overview. Overview đo sự kiện thô gộp lại thành sự cố. Pulse analysis đo sự kiện bị lọc trên sự kiện được lưu. Chỉ so mỗi số với chính nó theo thời gian.
Nguồn nhiễu hàng đầu
Bảng xếp hạng 10 nguồn gửi nhiều sự kiện nhất trong khoảng thời gian đã chọn.
Một tích hợp có thể xuất hiện thành nhiều dòng. Ví dụ, một kết nối AWS có thể tạo ra một luồng riêng cho mỗi tài khoản và region.
Đọc kết quả
Dùng các số liệu này để quyết định nên dành thời gian tinh chỉnh ở đâu. Không có ngưỡng chuẩn cho một tỷ lệ “lành mạnh”, vì tỷ lệ phụ thuộc vào nguồn của bạn. Hãy so mỗi số với xu hướng của chính nó theo từng tuần.
Pulse lọc sự kiện bằng bốn cơ chế kiểm tra:
- Loại bỏ trùng lặp cho các lần gửi lặp lại
- Giới hạn tốc độ theo từng nguồn
- Một Snooze do ai đó đặt
- Các mẫu nhiễu Pulse đã học
webhook.datadog với Signals 4.800, Suppressed 92%, Clusters routed 1% cho thấy Datadog gửi rất nhiều bản lặp và gần như không bản nào dẫn tới đâu. Mở vài Signal của nguồn này trên Resolve → Pulse để tìm các monitor đứng sau, rồi nâng ngưỡng hoặc tắt chúng trong Datadog.
Hãy xem các số liệu này là gợi ý, không phải kết luận. Xem các cluster và Signal thực tế trước khi thay đổi một nguồn hay một snooze.
Khắc phục sự cố
Bước tiếp theo
Tinh chỉnh Cluster và lọc nhiễu
Hành động dựa trên những gì bảng nguồn nhiễu cho thấy.
Kết nối nguồn Pulse
Thêm hoặc sửa các nguồn cung cấp dữ liệu cho Pulse.
Resolve insights
Xem kết quả về độ tin cậy, độ chính xác và runbook bên cạnh Pulse.
Điều tra và RCA
Theo một Cluster đã định tuyến vào cuộc điều tra của nó.