Chuyển đến nội dung chính
Phân tích Pulse cho bạn biết pipeline cảnh báo có đang làm việc hữu ích hay không. Trong một tab, bạn thấy bao nhiêu sự kiện thô đã đến, bao nhiêu sự kiện Pulse giữ lại vì là nhiễu, bao nhiêu sự kiện đã đi tới một sự cố hoặc được giải quyết, và nguồn nào gửi nhiều nhất. Một số thuật ngữ dùng trên trang này:
  • Sự kiện thô (raw event): một thông báo Pulse nhận được, như một cảnh báo Datadog hoặc một CloudWatch alarm.
  • Signal: sự kiện còn lại sau bước lọc nhiễu.
  • Sự kiện bị lọc (suppressed event): sự kiện Pulse đánh giá là nhiễu nhưng vẫn giữ lại để đếm (Rate limit, Snooze và Verdict). Bản trùng lặp bị loại bỏ thì không được giữ lại.
  • Sự kiện được lưu (stored events): Signal cộng với sự kiện bị lọc.
  • Cluster: một nhóm Signal liên quan mà Pulse xem như một vấn đề.
  • Đạt kết quả (reached an outcome): Signal có Cluster đã được liên kết với một sự cố hoặc đã được giải quyết. Correlation yield và cột Clusters routed đều đếm theo tiêu chí này (bao gồm cả Cluster tự đóng, xem Cluster tự giải quyết).
Xem Clusters để biết toàn bộ vòng đời.

Mở phân tích Pulse

1

Vào Insights

Trên thanh bên, mở Resolve → Insights, trong mục Analytics. Các vai trò Admin, Developer và Viewer của workspace đều mở được.
2

Chọn tab Pulse

Nhấn tab Pulse analysis. Các tab còn lại (Overview, Accuracy & trust, Runbook analytics) được mô tả trong Resolve insights.
3

Đặt khoảng thời gian

Dùng bộ chọn khoảng thời gian ở góc trên bên phải. Các tùy chọn từ Last 1 hour đến Last 30 days. Mặc định là Last 7 days. Mỗi thẻ lọc theo một mốc thời gian khác nhau, liệt kê trong cột Khoảng thời gian lọc theo ở bảng bên dưới. Một Cluster hình thành cách đây 8 ngày và được giải quyết hôm qua sẽ không có trong Cluster MTTR khi chọn Last 7 days, nhưng các Signal của Cluster đó trong 7 ngày gần nhất vẫn được tính vào Correlation yield.Trạng thái thành công: bốn thẻ số liệu xuất hiện, tiếp theo là bảng Top noisy sources. Nếu không có sự kiện nào đến trong khoảng thời gian đó, bảng hiển thị “No signals ingested in this period”.
Số liệu được tính khi tab tải. Tải lại trang để làm mới. Không có chức năng xuất dữ liệu.

Ý nghĩa của từng số liệu

Vì có bản trùng lặp bị loại bỏ, Signals ingested thường lớn hơn số sự kiện được lưu làm cơ sở cho các thẻ khác. Cluster MTTR là trung vị tính trên các Cluster. Mean time to resolve trên tab Overview là trung bình tính trên các sự cố. Hai số này thường khác nhau.
Các lần gửi vượt giới hạn tốc độ của webhook (mặc định 1.000 lần mỗi giờ) bị loại bỏ mà không báo, vẫn trả về 200, và không xuất hiện ở đâu trên tab này. Resolve không hiển thị số lần bị loại bỏ. Nếu thiếu cảnh báo trong một đợt dồn dập, hãy so số lần công cụ của bạn đã gửi trong giờ đó với Signals ingested, rồi nâng giới hạn của webhook hoặc tách các monitor. Xem Limits and responses.

Cluster tự giải quyết

Cluster không có Signal mới trong 12 giờ sẽ tự đóng và được tính là đã giải quyết. Điều này ảnh hưởng đến ba số liệu:
  • Correlation yield và Clusters routed tính Cluster đó là đã đạt kết quả, kể cả khi không ai xem. Yield cao nghĩa là cảnh báo đã gom vào các Cluster đã kết thúc, không có nghĩa là mọi cảnh báo đều quan trọng. Hãy đọc số này cùng với làn Routed trên Resolve → Pulse, nơi chỉ hiển thị các Cluster đã liên kết với sự cố.
  • Cluster MTTR đo Cluster đó đến thời điểm tự đóng, không phải đến Signal cuối cùng.
Cluster không ai đụng tới cần ít nhất 12 giờ để được giải quyết, nên mỗi Cluster như vậy cộng thêm từ 12 giờ trở lên vào Cluster MTTR. Nếu phần lớn Cluster tự đóng, trung vị chủ yếu phản ánh bộ đếm giờ đó. Để MTTR phản ánh thời gian phục hồi thực tế, hãy nhấn Resolve trên bảng Cluster khi vấn đề kết thúc. Xem Action reference.
Noise suppressed không phải cùng một số với Noise reduced trên tab Overview. Overview đo sự kiện thô gộp lại thành sự cố. Pulse analysis đo sự kiện bị lọc trên sự kiện được lưu. Chỉ so mỗi số với chính nó theo thời gian.

Nguồn nhiễu hàng đầu

Bảng xếp hạng 10 nguồn gửi nhiều sự kiện nhất trong khoảng thời gian đã chọn. Một tích hợp có thể xuất hiện thành nhiều dòng. Ví dụ, một kết nối AWS có thể tạo ra một luồng riêng cho mỗi tài khoản và region.

Đọc kết quả

Dùng các số liệu này để quyết định nên dành thời gian tinh chỉnh ở đâu. Không có ngưỡng chuẩn cho một tỷ lệ “lành mạnh”, vì tỷ lệ phụ thuộc vào nguồn của bạn. Hãy so mỗi số với xu hướng của chính nó theo từng tuần. Pulse lọc sự kiện bằng bốn cơ chế kiểm tra:
  • Loại bỏ trùng lặp cho các lần gửi lặp lại
  • Giới hạn tốc độ theo từng nguồn
  • Một Snooze do ai đó đặt
  • Các mẫu nhiễu Pulse đã học
Chi tiết từng cơ chế nằm trong Noise suppression. Ví dụ, dòng webhook.datadog với Signals 4.800, Suppressed 92%, Clusters routed 1% cho thấy Datadog gửi rất nhiều bản lặp và gần như không bản nào dẫn tới đâu. Mở vài Signal của nguồn này trên Resolve → Pulse để tìm các monitor đứng sau, rồi nâng ngưỡng hoặc tắt chúng trong Datadog. Hãy xem các số liệu này là gợi ý, không phải kết luận. Xem các cluster và Signal thực tế trước khi thay đổi một nguồn hay một snooze.

Khắc phục sự cố

Bước tiếp theo

Tinh chỉnh Cluster và lọc nhiễu

Hành động dựa trên những gì bảng nguồn nhiễu cho thấy.

Kết nối nguồn Pulse

Thêm hoặc sửa các nguồn cung cấp dữ liệu cho Pulse.

Resolve insights

Xem kết quả về độ tin cậy, độ chính xác và runbook bên cạnh Pulse.

Điều tra và RCA

Theo một Cluster đã định tuyến vào cuộc điều tra của nó.