メインコンテンツまでスキップ

ガバナンスと監視（Governance Overview）

ステータス

Owner: TBD · ステータス: draft · 正規ソース: flezi.app.frontend.main/src/pages/GovernanceOverview.tsx

対象者​

組織管理者（ORG_ADMIN）、システム管理者（SYSTEM_ADMIN）、AI エンジニア（AI_BUILDER）。

できること​

  • 組織の大規模言語モデル（LLM Costs）の利用コストを包括的に把握する。
  • Agent の回答品質とタスク完了率を監視する。
  • Tracing システムを通じて各実行セッションを詳細に追跡する。
  • 品質評価の実行（Evaluation Runs）と評価用データセット（Datasets）を管理する。

Governance モジュールの領域​

  1. 概要（Overview）：コスト、token、model 呼び出し回数のサマリーを表示します。
  2. トレース（Tracing）：AI 推論の各ステップを詳細に示す span ツリーを表示します。
  3. 利用状況とコスト（Usage & Costs）：部門、ユーザー、Agent ごとの消費レポートを表示します。
  4. 品質ダッシュボード（Quality Dashboard）：Agent の忠実度と正確性のスコアを時系列で表示します。
  5. 評価（Evaluations）：LLM-as-a-judge による自動採点セットを設定し、benchmark を実行します。

関連ページ​