Quản Trị Đánh Giá & Kiểm Toán Hội Thoại (Feedback & Audit)

Vòng lặp phản hồi (Feedback Loop) và kiểm toán ngữ cảnh (Context Audit) là tính năng tối quan trọng của Pango Chatbot Admin, giúp đội ngũ kỹ sư AI và quản trị viên doanh nghiệp theo dõi độ hài lòng, phát hiện câu trả lời chưa chuẩn xác và liên tục tinh chỉnh tri thức cho mô hình.

1. Danh Sách Đánh Giá (Feedback Management)

Màn hình Quản lý đánh giá thu thập toàn bộ các lượt xếp hạng sao (1 đến 5 sao) và nhận xét do người dùng gửi từ giao diện chat hoặc qua API SubmitAiFeedback:

Các Khả Năng Nổi Bật

• Bộ Lọc Nâng Cao: Tìm kiếm theo từ khóa trong câu hỏi, phân loại hình thức đánh giá (Rating sao, Thumbs up/down, Text comment), chọn theo Agent cụ thể và khoảng thời gian tùy chọn.
• Xem Nhanh Đánh Giá: Hiển thị số sao trực quan, người gửi, thời điểm tạo.
• Xuất Dữ Liệu Đánh Giá: Nút Xuất dữ liệu đánh giá trích xuất danh sách để tổng hợp KPI chất lượng dịch vụ.

2. Chi Tiết Đánh Giá (Feedback Detail Inspection)

Khi bấm vào nút xem chi tiết của một đánh giá:

Cấu Trúc Thông Tin

• Cột Phải (Tổng Quan):
  • Tên Agent xử lý (ví dụ: buddy).
  • Loại phản hồi (Rating).
  • Danh tính người dùng và thời điểm gửi.
  • Số sao đánh giá (5 sao).
  • Nút Logs: Cho phép kỹ sư AI mở xem chi tiết kỹ thuật của lượt gọi (prompt tokens, completion tokens, latency thời gian phản hồi, mô hình LLM đã phục vụ).
• Cột Trái (Nội Dung Tin Nhắn):
  • Hiển thị trực tiếp câu trả lời của AI kèm thẻ sản phẩm trực quan (ví dụ: Tai nghe Bluetooth True Wireless Baseus Bass BC1 Lite Open-Ear, giá bán 590.000đ).

3. Kiểm Toán Toàn Bộ Ngữ Cảnh Hội Thoại (Conversation Context Audit)

Tính năng vượt trội của Pango Chatbot Admin là khả năng tái hiện toàn bộ ngữ cảnh hội thoại dẫn đến phản hồi đó thông qua tab Ngữ cảnh hội thoại:

Lợi Ích Cốt Lõi Cho Doanh Nghiệp

1. Hiểu Rõ Nguyên Nhân Đánh Giá:
   • Thay vì chỉ nhìn thấy một câu trả lời đơn lẻ bị đánh giá thấp hay cao, quản trị viên có thể đọc toàn bộ cuộc trao đổi trước đó (người dùng đã hỏi những gì, cung cấp thông tin gì).
   • Ví dụ trên hình: Người dùng hỏi "MÁY CHIẾU MINI BEECUBE X2 MAX GEN 5 FULLHD TRẮNG kết nối với điện thoại bằng cách nào", AI đã trả lời chi tiết 2 cách kết nối (Không dây qua AirPlay/Miracast và Có dây qua cáp chuyển đổi HDMI). Nhờ câu trả lời chuẩn xác và hữu ích này, người dùng đã chấm 5 sao hài lòng.
2. Phát Hiện Ảo Giác (Hallucination) & Sai Lệch Tri Thức:
   • Nếu có đánh giá tiêu cực, kỹ sư RAG có thể truy ngược lại đoạn tài liệu tri thức nào trong Knowledge Base đã dẫn đến câu trả lời chưa đúng, từ đó cập nhật lại tri thức chỉ sau vài phút.
3. Đảm Bảo Tuân Thủ & Bảo Mật (Compliance):
   • Đảm bảo nhân sự không sử dụng AI để hỏi các dữ liệu nhạy cảm vi phạm chính sách bảo mật nội bộ của doanh nghiệp.

4. Quản lý block hội thoại (Spam End User)

Màn hình Quản lý block hội thoại giúp quản trị viên theo dõi các hội thoại của end user bị tạm khóa bởi cơ chế chống spam. Mỗi bản ghi chỉ được lưu trong thời gian giới hạn để đội ngũ nhanh chóng kiểm tra và xử lý.

Thao Tác Vận Hành

• Lọc và tìm kiếm: Tra cứu theo người gửi, Agent hoặc kênh tích hợp để xác định nhanh hội thoại bị chặn.
• Kiểm tra mức vi phạm: Xem mức vi phạm, thời gian khóa và mã hội thoại trước khi quyết định xử lý.
• Xem tin nhắn vi phạm: Mở chi tiết để đối chiếu các tin nhắn đã kích hoạt cơ chế chống spam, bao gồm cả nội dung đính kèm.
• Khôi phục khi cần thiết: Sau khi xác minh, quản trị viên có thể xử lý hoặc mở lại hội thoại theo chính sách vận hành của doanh nghiệp.