品質スコアと
回答の生成過程を確認します
評価モデルが回答品質・忠実度・検索品質を採点します。トレースは、検索・モデル呼び出し・ツール実行の過程を所要時間とトークン使用量とともに記録し、OpenTelemetryでエクスポートできます。

品質スコアと
回答の生成過程を確認します
評価モデルが回答品質、忠実性、検索品質を採点します。トレースは検索・モデル呼び出し・ツール実行を時間とトークン単位で記録し、OpenTelemetryでエクスポートできます。
質問:有給休暇は何日前までに申請すればいいですか? · サンプルデータ
自動評価の平均スコア · サンプルデータ
会話だけでなく、スケジュールタスク、文書のインデックス作成、コーディングツールの呼び出しまで同じ画面でトレースします。使用量や推定コスト、監査ログも管理者パネルでまとめて確認できます。
導入前後の比較
業務に合うモデルを、根拠なく選んでいます。
リーダーボードと、モデル名を伏せたアリーナでモデルを比較して選びます。
回答が遅いときや誤っているときに、どこに問題があるのかわかりません。
トレースが、検索・モデル呼び出し・ツール実行をスパンごとに表示します。
問題が起きても、気づくのが遅れます。
アラート条件を設定し、メール・Webhookで通知を受け取ります。
4ステップの流れ
エージェントごとに自動評価をオンにし、評価モデルを選びます。

ユーザーが回答に残した評価とコメントを集めます。

リーダーボードとアリーナで、モデルとエージェントを比較します。

トレースで処理の過程を確認し、アラート条件に該当すると通知を受け取ります。

評価・トレーシングの詳細機能
自動評価
回答品質・忠実度・検索品質を採点します。
フィードバック
回答ごとにユーザーの評価とコメントを集め、エクスポートします。
リーダーボード
モデルとエージェントのスコアを比較します。
アリーナ
モデル名を伏せた状態で2つの回答を受け取り、より良いほうを選びます。
トレース
処理の過程をツリーとタイムラインで表示し、トークン使用量を確認します。
OpenTelemetryエクスポート
トレースを自社のモニタリングツールに送信します。
アラート
設定した条件に該当すると、メール・Webhookで通知します。
使用量・コスト
モデル・ユーザーごとの使用量と推定コストを確認します。
企業ごとの設定項目
- 評価モデルと評価対象を設定します。
- アラート条件と通知チャネルを設定します。
- トレースをOpenTelemetryでエクスポートするかどうかを設定します。
数値は2026年10月時点の製品にもとづいています。
評価・トレーシングに関するよくある質問
評価にもモデルのコストがかかりますか?
はい。評価モデルが採点するため、呼び出しのコストがかかります。評価の対象とモデルは管理者が設定します。
会話以外の処理もトレースしますか?
はい。予約タスク、文書のインデックス作成、コーディングツールの呼び出しまで、同じ画面でトレースします。
社内のモニタリングツールと連携できますか?
はい。トレースはOpenTelemetryで、監査ログはsyslogで送信します。
自社の文書で
実際にお試しください
導入のご相談では、社内文書の一部を連携して実際の回答品質をご確認いただけます。ご質問をお寄せいただければ、担当者よりご連絡いたします。

