Bỏ qua để đến nội dung

Tiến hoá Agent (Agent Evolution)

Tiến hoá Agent (Agent Evolution) là hệ thống giúp AI Agent ghi nhận trải nghiệm từ các tình huống thực tế, phân tích nguyên nhân - kết quả, thử nghiệm lại (Replay A/B) và đưa ra các đề xuất cải tiến chính xác cho bộ não của Agent.

Trong tab Tiến hoá Agent (AgentEvolutionPanel), bạn có thể thiết lập mức độ tự hành khi học của Agent:

Chế độ Tên UI Mô tả chi tiết Mức độ an toàn
memory Chỉ ghi nhớ Agent chỉ lưu thông tin ký ức của từng khách hàng, không thay đổi năng lực hay system prompt chung của Agent. An toàn tuyệt đối
propose Học & đề xuất Agent tự rút kinh nghiệm, chạy thử Replay A/B trên hội thoại cũ và chờ bạn duyệt trước khi áp dụng. Khuyến nghị (Mặc định)
auto Tự động có kiểm soát Tự động áp dụng các kiến thức bổ sung rủi ro thấp. Riêng Prompt patch và Skill mới vẫn bắt buộc phải chờ bạn duyệt. Tối ưu tự động

4 Thẻ chỉ số hiệu suất học (Evolution Metrics)

Phần tiêu đề “4 Thẻ chỉ số hiệu suất học (Evolution Metrics)”
  • Trải nghiệm (experiences): Tổng số hội thoại và tình huống Agent đã thu thập để phân tích.
  • Tỷ lệ thành công (successRate): Tỷ lệ phần trăm các tình huống Agent phản hồi tốt (successes / experiences).
  • Chưa xử lý (unprocessed): Số lượng trải nghiệm mới đang chờ hệ thống gom cụm phân tích.
  • Reward trung bình (average_reward): Điểm thưởng đánh giá chất lượng phản hồi trung bình của Agent.

Hệ thống tiến hoá sinh ra 3 loại đề xuất:

  1. Prompt patch: Đề xuất sửa đổi hoặc bổ sung quy tắc trong System Prompt (vd: “Thêm câu từ chối lịch sự khi hết hàng”, “Siết chặt quy tắc không bịa giá”).
  2. Kiến thức (Knowledge): Đề xuất bổ sung Fact hoặc thông tin sản phẩm/chính sách bị thiếu vào Knowledge Base.
  3. Kỹ năng (Skill): Đề xuất tạo hướng dẫn skill mới cho Agent khi phát hiện quy trình tư vấn lặp đi lặp lại.

Trạng thái của Đề xuất (Proposal Statuses)

Phần tiêu đề “Trạng thái của Đề xuất (Proposal Statuses)”
Trạng thái key Nhãn UI Ý nghĩa
evaluating Đang đánh giá Hệ thống đang chạy Replay A/B thử nghiệm câu trả lời mới trên hội thoại cũ
ready Chờ duyệt Đã vượt qua kiểm thử A/B, sẵn sàng chờ Admin bấm duyệt
approved Đã duyệt Admin đã chấp nhận đề xuất
applied Đã áp dụng Đề xuất đã được cập nhật trực tiếp vào Agent/Knowledge
failed_eval Không đạt A/B Đề xuất bị loại do kết quả Replay kém hơn câu trả lời cũ
rejected Đã từ chối Admin chủ động bấm từ chối

Quy trình kiểm thử Replay A/B & Duyệt đề xuất

Phần tiêu đề “Quy trình kiểm thử Replay A/B & Duyệt đề xuất”
flowchart TD
  LOG[Hội thoại thực tế] --> DETECT[Gom cụm trải nghiệm & lỗi]
  DETECT --> GEN[Sinh candidate cải tiến]
  GEN --> REPLAY{Chạy Replay A/B<br/>trên hội thoại cũ}
  REPLAY -->|Tốt hơn| READY[Chuyển trạng thái Chờ duyệt]
  REPLAY -->|Kém hơn| FAIL[Trạng thái Không đạt A/B]
  READY --> REVIEW{Admin duyệt}
  REVIEW -->|Duyệt ✅| APPLY[Cập nhật Prompt/Knowledge/Skill]
  REVIEW -->|Từ chối ⛔| REJ[Từ chối]
  1. Vào Trợ lý AI → chọn Agent → vào Builder → tab Tiến hoá Agent.
  2. Bấm nút Phân tích & tạo đề xuất (Replay & chấm) để chạy phân tích tức thì.
  3. Danh sách các đề xuất trạng thái Chờ duyệt hiển thị rõ:
    • Đoạn văn bản thay đổi (candidate content/instruction).
    • Điểm số A/B test (Improvement score).
  4. Bấm ✅ Áp dụng đề xuất hoặc ⛔ Từ chối.