Chuyển đến nội dung chính
Phân tích nguyên nhân gốc (RCA) là bước CloudThinker tìm ra lý do một sự cố xảy ra. CloudThinker đọc sự cố, các cảnh báo đứng sau sự cố và các hệ thống bạn đã kết nối, kiểm chứng các giả thuyết, rồi trao cho bạn một kết luận bằng văn bản, sơ đồ diễn biến của sự cố và danh sách bản sửa đề xuất. Bạn xem xét và quyết định bước tiếp theo. RCA là giai đoạn Investigate của Resolve. RCA đọc log, metric, trace, các thay đổi gần đây và các phụ thuộc thông qua những kết nối bạn đã thiết lập, và chỉ chạm tới được những gì các kết nối đó chạm tới. Cuộc điều tra chỉ đọc. Mọi thay đổi đều đi qua một runbook và cài đặt Approvals của bạn. Để biết model thấy những gì và thông tin bí mật được xử lý ra sao, xem Bảo vệ dữ liệu.

Trước khi bắt đầu

  • Ít nhất một kết nối tới các hệ thống liên quan, như tài khoản cloud, cluster Kubernetes hoặc công cụ giám sát. RCA chỉ kiểm tra được những gì RCA đọc được.
  • Vai trò Admin của workspace để bắt đầu cuộc điều tra, xử lý đề xuất và đổi trạng thái sự cố (kể cả đóng sự cố). Developer và Viewer đọc được kết quả. Xem Vai trò.
  • Credit. Mỗi cuộc điều tra là công việc của agent, tính phí bằng credit như mọi lượt chạy khác, kể cả các cuộc điều tra tự động bắt đầu. Theo dõi chi tiêu ở Usage, và đặt trần cho workspace bằng Giới hạn credit. Để dừng các lượt chạy tự động, tắt Auto-investigate trên webhook hoặc tạm dừng On duty. Xem Điều gì khởi động một cuộc điều tra.

Cuộc điều tra bắt đầu thế nào

Chạy cuộc điều tra

1

Mở sự cố

Vào Resolve → Investigation và chọn sự cố trong hàng đợi.
2

Bắt đầu RCA nếu chưa chạy

Nếu sự cố chưa từng được điều tra, nhấn Investigate ở đầu trang sự cố.Trạng thái thành công: sự cố chuyển sang AI is handling và nút Watch live xuất hiện ở đầu trang.
3

Theo dõi trực tiếp (tùy chọn)

Nhấn Watch live để mở cuộc hội thoại nơi CloudThinker đang làm việc. Bạn sẽ thấy từng bước kiểm tra ngay khi chạy. Investigation timeline trên sự cố cũng cập nhật trực tiếp.
4

Đọc kết luận

Khi phân tích xong, sự cố chuyển sang Needs your decision. Dòng của sự cố trong hàng đợi hiển thị lý do, như Cause found cho sự cố có trạng thái Identified. Mục Kết quả điều tra liệt kê mọi trạng thái và nhóm tương ứng. Mục Đọc kết quả giải thích từng phần của trang.Nếu timeline ngừng thêm bước mới và Watch live không có hoạt động nào, xem Cuộc điều tra bị treo.
5

Xử lý từng đề xuất

Đánh dấu từng mục trong Remediation là đã làm hoặc bỏ qua. Xem Xử lý từng đề xuất khắc phục.
6

Đóng sự cố

Nhấn huy hiệu trạng thái ở đầu trang sự cố, chọn Resolved hoặc False Alarm, rồi xác nhận bằng Change Status. Chỉ Admin của workspace mới đổi được trạng thái. Các vai trò khác thấy huy hiệu nhưng không có menu.Trạng thái thành công: sự cố chuyển sang nhóm Resolved hoặc Dismissed.

Hàng đợi điều tra

Resolve → Investigation nhóm sự cố theo việc sự cố cần ở bạn:

Đọc kết quả

Trang sự cố đặt câu trả lời lên đầu và tài liệu hỗ trợ bên dưới. Một kết quả ngắn có thể trông như sau:

Nhãn bằng chứng

Nhãn cạnh Current assessment cho biết nguyên nhân gốc được củng cố tới mức nào: Cause unproven là một kết luận có cơ sở yếu. Not Found là một trạng thái, nghĩa là hoàn toàn không có kết luận.

Xử lý từng đề xuất khắc phục

Di chuột lên một đề xuất trong Remediation, mở menu More remediation actions của đề xuất đó, rồi chọn: Ghi chú là tùy chọn và được giữ trên đề xuất cho bất kỳ ai xem lại sự cố. Thao tác xử lý là cuối cùng: menu biến mất khi đề xuất đã được đánh dấu, và không thể hoàn tác. Phiên điều tra sau cũng không ghi đè lên.

Kết quả điều tra

Mỗi trạng thái ứng với một nhóm trong hàng đợi, và dòng trong hàng đợi hiển thị lý do: Sự cố cũng có thể nằm trong Needs your decision với một trong các lý do sau:
Hạn chế đã biết: sự cố ở trạng thái Not Found rời khỏi hàng đợi. Không nhóm hay bộ lọc nào liệt kê sự cố này. Trước khi rời trang của sự cố, hãy chuyển trạng thái hoặc sao chép URL:
  • Để tiếp tục xử lý, thêm kết nối còn thiếu, nhấn huy hiệu trạng thái và chọn Investigating. Sự cố đã từng được điều tra sẽ quay về Needs your decision, không phải Not started, và tại đó bạn có thể điều tra lại.
  • Để bỏ qua, chọn Investigating, rồi mở lại huy hiệu và chọn Resolved hoặc False Alarm.
  • Để quay lại sau, đánh dấu trang URL của sự cố. Đó là cách duy nhất để quay lại.

Điều tra lại

Mỗi sự cố có một bản ghi điều tra và một Investigation timeline. Một phiên là một cuộc hội thoại điều tra. Hỏi lại trong cuộc hội thoại đó vẫn nằm trong cùng phiên, nên không có mốc phiên mới nào xuất hiện. Phiên sau, như phiên bắt đầu khi bước phân loại ghép một cảnh báo mới vào sự cố, mở đầu bằng mốc Session started. Các phiên trước vẫn xem được trong More actions → Earlier sessions. Nút Investigate chỉ xuất hiện trước cuộc điều tra đầu tiên. Để điều tra lại với quyền truy cập hoặc ngữ cảnh mới:
1

Bổ sung phần còn thiếu

Thêm kết nối còn thiếu, hoặc ghi lại ngữ cảnh bạn muốn CloudThinker sử dụng.
2

Mở cuộc hội thoại

Ở đầu trang sự cố, mở More actions → Open AI Conversation.
3

Yêu cầu xem xét lại

Nói rõ điều gì đã thay đổi. Ví dụ: I've connected the prod-eu Datadog account. Re-check the root cause.Trạng thái thành công: các bước kiểm tra được ghi lại sẽ xuất hiện thành bước mới trong Investigation timeline. Nếu nguyên nhân gốc thay đổi, một mục Root cause revised xuất hiện và Current assessment được cập nhật. Nếu không thấy cả hai, câu trả lời không làm thay đổi sự cố.
Nếu phiên thất bại (lý do trong hàng đợi là Investigation stopped), trang sự cố hiển thị bảng Analysis Failed bên dưới Current assessment. Nhấn Retry Analysis tại đó. Chỉ dành cho Admin.

Sự cố tương quan

Khi nhiều cảnh báo có chung một nguyên nhân khả dĩ, Resolve nhóm chúng dưới một sự cố cha và chỉ chạy một RCA ở đó. Mở một cảnh báo đã được nhóm sẽ thấy thẻ Part of a Correlated Group: Việc nhóm bắt đầu từ Pulse. Để các cảnh báo liên quan được nhóm đúng, hãy ánh xạ Resource ID Path trên từng webhook để các lần lặp lại của cùng một lỗi được gom lại, và Service Path về một tên service duy nhất để các cảnh báo khác nhau về cùng một service có thể nhập chung. Xem Cách tín hiệu nhập vào cluster.

Chia sẻ hoặc xuất kết quả

Từ menu More actions của sự cố:
  • Download analysis PDF lưu bản phân tích dưới dạng PDF.
  • Open AI Conversation mở toàn bộ cuộc hội thoại điều tra, nơi bạn có thể đặt câu hỏi tiếp theo.
  • View source context hiển thị các cảnh báo và dữ liệu Pulse mà sự cố bắt nguồn.

Khắc phục sự cố

Bước tiếp theo

Ghi nhận sự cố

Bắt đầu cuộc điều tra từ báo cáo của một người.

Dùng runbook

Biến kết luận thành một bản sửa có phạm vi rõ ràng và đã được phê duyệt.

Kiểm soát RCA tự động

Đặt On duty và cập nhật tiến độ trực tiếp.

Bộ nhớ sự cố

Xem bài học được mang sang các cuộc điều tra sau thế nào.