품질 점수와
답변 생성 과정을 확인합니다
평가 모델이 답변 품질 · 충실도 · 검색 품질을 채점합니다. 트레이스는 검색 · 모델 호출 · 도구 실행 과정을 소요 시간, 토큰 사용량과 함께 기록하며, OpenTelemetry로 내보낼 수 있습니다.

품질 점수와
답변 생성 과정을 확인합니다
평가 모델이 답변 품질, 충실도, 검색 품질을 채점합니다. 트레이스는 검색·모델 호출·도구 실행을 시간과 토큰 단위로 기록하고, OpenTelemetry로 내보낼 수 있습니다.
질문: 연차는 며칠 전에 신청해야 하나요? · 예시 데이터
자동 평가 평균 점수 · 예시 데이터
대화뿐 아니라 예약 작업, 문서 색인, 코딩 도구 호출까지 같은 화면에서 추적합니다. 사용량과 예상 비용, 감사 로그도 관리자 패널에서 함께 확인합니다.
도입 전후 비교
업무에 맞는 모델을 근거 없이 고릅니다.
리더보드와 모델 이름을 가린 아레나에서 모델을 비교해 고릅니다.
답이 느리거나 틀렸을 때 어디가 문제인지 모릅니다.
트레이스가 검색 · 모델 호출 · 도구 실행을 구간별로 보여 줍니다.
문제가 생겨도 늦게 알게 됩니다.
경고 조건을 정해 이메일 · 웹훅으로 알림을 받습니다.
4단계 진행 과정
에이전트마다 자동 평가를 켜고 평가 모델을 고릅니다.

사용자가 답변에 남긴 평가와 의견을 모읍니다.

리더보드와 아레나로 모델과 에이전트를 비교합니다.

트레이스로 처리 과정을 보고, 경고 조건에 해당하면 알림을 받습니다.

평가 · 추적의 세부 기능
자동 평가
답변 품질 · 충실도 · 검색 품질을 채점합니다.
피드백
답변마다 사용자의 평가와 의견을 모아 내보냅니다.
리더보드
모델과 에이전트의 점수를 비교합니다.
아레나
모델 이름을 가린 채 두 답변을 받아 더 나은 쪽을 고릅니다.
트레이스
처리 과정을 트리와 타임라인으로 보고, 토큰 사용량을 확인합니다.
OpenTelemetry 내보내기
트레이스를 회사의 모니터링 도구로 보냅니다.
경고
정한 조건에 해당하면 이메일 · 웹훅으로 알립니다.
사용량 · 비용
모델 · 사용자별 사용량과 예상 비용을 봅니다.
회사별 설정 항목
- 평가 모델과 평가 대상을 정합니다.
- 경고 조건과 알림 채널을 정합니다.
- 트레이스를 OpenTelemetry로 내보낼지 정합니다.
수치는 2026년 10월 제품 기준입니다.
평가 · 추적에 대해 자주 묻는 질문
평가에도 모델 비용이 드나요?
네. 평가 모델이 채점하므로 호출 비용이 듭니다. 평가할 대상과 모델을 관리자가 정합니다.
대화 외의 작업도 추적하나요?
네. 예약 작업, 문서 색인, 코딩 도구 호출까지 같은 화면에서 추적합니다.
사내 모니터링 도구와 연동되나요?
네. 트레이스는 OpenTelemetry로, 감사 로그는 syslog로 보냅니다.
우리 회사 문서로
직접 확인해 보세요
도입 상담에서는 사내 문서 일부를 연결해 실제 답변 품질을 확인하실 수 있습니다. 궁금한 점을 남겨 주시면 담당자가 연락드리겠습니다.

