본문으로 건너뛰기

평가 작업

최근 업데이트 2026. 10. 30.

평가 작업은 평가 세트, 평가 대상, 평가기 및 필드 매핑을 조합합니다. 작업 버전은 설정을 저장하는 데 사용되며, 실행할 때마다 하나의 Run이 생성되어 상태, 동결된 스냅샷 및 결과를 담습니다.

대상 사용자: 평가 시작, 추적 및 분석을 수행하는 사용자. 확인 기준: 2026-10-30 프로젝트의 현재 구현. 배포된 환경의 진입점은 버전과 권한에 따라 다를 수 있습니다.

검색 키워드: Evaluation Run, 초안, 작업 버전, 실행 스냅샷, 복사, 취소.

1. 목적에 따라 시작하기​

2. 작업 찾기 및 계속하기​

  1. 평가 작업으로 이동하여 이름 검색과 상태 필터로 작업을 찾습니다.
  2. 설정이 완료되지 않은 작업에서는 계속 설정을 사용하여 설정을 보완한 다음 시작합니다. 초안을 임시 저장해도 평가 대상이나 평가용 모델을 호출하지 않습니다.
  3. 실행한 작업은 이름을 클릭하여 작업 결과로 이동하고 결과와 설정 사이를 전환합니다. 실행 중인 작업은 상태를 자동으로 새로고침합니다.

3. 상태 이해하기​

상태의미 및 처리
시작 전 / 초안설정을 아직 실행하지 않았습니다. 설정을 계속하거나 임시 저장합니다.
대기 중제출되었으며 실행 리소스를 기다리고 있습니다. 먼저 진행률을 확인하여 중복 생성을 방지합니다.
실행 중평가 대상을 호출하거나 평가 중입니다.
취소 중취소 요청이 제출되었으며 현재 실행이 정리될 때까지 기다립니다.
완료됨모든 Case의 실행이 종료되었고 실패한 Case가 없습니다. 비즈니스 품질 기준을 충족한다는 의미는 아닙니다.
일부 실패일부 호출이나 평가가 실패했지만 완료된 결과는 확인할 수 있습니다.
실패이번 실행이 실패했으며 Case와 실패 사유에서 문제를 찾아야 합니다.
취소됨이후 실행이 취소되었으며 완료된 결과는 유지됩니다.

4. 복사, 취소 및 삭제​

리스트의 작업 복사를 사용하면 독립된 초안이 즉시 생성됩니다. 기본적으로 사본 이름이 붙고 확인할 수 있도록 설정을 유지하지만 자동으로 시작하지는 않습니다. 복사 전후에 평가 세트 버전, 평가 대상, 평가기 버전 및 매핑을 확인해야 합니다. 성공 알림 후 설정으로 이동하여 시작을 완료합니다.

실행 중에 중지해야 하면 결과 페이지에서 작업 취소를 클릭하고 확인합니다. 취소해도 완료된 결과가 지워지지 않으며, 평가 대상 Agent가 이미 수행한 외부 작업을 되돌린다는 의미도 아닙니다.

리스트에서는 초안 또는 실패한 작업만 삭제할 수 있습니다. 삭제하기 전에 필요한 결과를 저장했는지 확인합니다. 이 작업은 복구할 수 없습니다. 같은 프로젝트의 독립 작업 간에 작업 이름은 고유해야 하며 초안도 이름을 점유합니다. 이름이 충돌하면 이름을 수정하여 계속하면 되며 모든 설정을 다시 입력할 필요는 없습니다.

5. 버전 및 과거 사실​

작업은 명시적인 평가 세트 버전과 평가기 버전을 바인딩하고, 시작할 때 실행 스냅샷을 동결합니다. 이후 리소스를 편집해도 과거 입력, 매핑 또는 평가 점수가 다시 작성되지는 않습니다. 과거 작업을 분석할 때는 설정의 동결된 내용을 기준으로 하며, 리소스의 현재 최신 내용으로 이번 실제 설정을 대체해서는 안 됩니다.

6. 다음 단계 및 관련 페이지​

사용 설명서 홈으로 돌아가기:

AI 평가 플랫폼

이 문서가 도움이 되었나요?