Quản trị & Giám sát (Governance Overview)
Trạng thái
Owner: TBD · Trạng thái: draft · Nguồn chuẩn: flezi.app.frontend.main/src/pages/GovernanceOverview.tsx
Dành cho ai
Quản trị viên Tổ chức (ORG_ADMIN), Quản trị viên Hệ thống (SYSTEM_ADMIN) và Kỹ sư AI (AI_BUILDER).
Bạn làm được gì
- Nắm bắt toàn diện chi phí sử dụng các mô hình ngôn ngữ lớn (LLM Costs) của doanh nghiệp.
- Giám sát chất lượng câu trả lời và tỷ lệ hoàn thành tác vụ của các Agent.
- Truy vết chi tiết từng phiên chạy thông qua hệ thống Tracing.
- Quản lý các đợt đánh giá chất lượng (Evaluation Runs) và bộ dữ liệu kiểm chuẩn (Datasets).
Các khu vực trong phân hệ Governance
- Tổng quan (Overview): Số liệu tóm tắt chi phí, token và số lượt gọi model.
- Truy vết (Tracing): Cây span chi tiết của từng bước suy luận AI.
- Chi phí & Sử dụng (Usage & Costs): Báo cáo tiêu thụ theo phòng ban, theo người dùng hoặc theo Agent.
- Bảng chất lượng (Quality Dashboard): Điểm số trung thực, độ chính xác của Agent theo thời gian.
- Đánh giá (Evaluations): Cấu hình bộ chấm điểm tự động LLM-as-a-judge và chạy benchmark.