본문으로 건너뛰기

평가 세트

최근 업데이트 2026. 10. 30.

평가 세트에는 재사용할 수 있는 테스트 예시를 저장합니다. 먼저 필드와 Case를 정의한 다음 평가 작업에서 각 필드의 용도를 정합니다.

대상 사용자: 테스트 데이터를 생성, 가져오기 및 유지 관리해야 하는 사용자. 확인 기준: 2026-10-30 프로젝트의 현재 구현. 배포된 환경의 진입점은 버전과 권한에 따라 다를 수 있습니다.

검색 키워드: Dataset, Case, CSV, XLSX, JSONL, 필드, 데이터 버전.

1. 빈 평가 세트 생성​

  1. 평가 세트로 이동하여 새 평가 세트를 클릭하고 이름과 선택 사항인 설명을 입력한 다음 평가 세트 생성을 클릭합니다.
  2. 상세의 필드 페이지에서 필드 추가를 클릭하고 이름을 입력하고 타입을 선택한 다음 새 필드 저장을 클릭합니다.
  3. 예시 페이지로 이동하여 예시 추가를 클릭하고 필드에 따라 데이터를 입력한 다음 새 예시 저장을 클릭합니다. 필드를 먼저 저장한 다음 해당 예시를 추가합니다.
필드 타입입력 방법
TEXT텍스트. 질문, 참조 답변 및 상황 태그에 적합합니다.
NUMBER유효한 숫자. 숫자 열에 일반 텍스트를 직접 입력할 수 없습니다.
BOOLEANtrue 또는 false. 편집 인터페이스에서 옵션으로 선택할 수 있습니다.
JSON유효한 JSON 객체, 배열 또는 값.
DATE인터페이스 요구 사항에 따라 유효한 날짜를 입력합니다. 텍스트 검증 형식은 YYYYMMDD입니다.
TIMEHH:mm:ss 형식으로 유효한 시간을 입력합니다.

2. 파일에서 가져오기​

  1. 평가 세트 가져오기를 클릭하고 이름과 설명을 입력한 다음 CSV, XLSX 또는 JSONL 파일을 선택합니다.
  2. 파일을 확인한 후 가져오기 시작을 클릭합니다. 제출 성공은 비동기 처리가 시작되었다는 의미일 뿐이므로 상세에서 가져오기가 완료될 때까지 기다려야 합니다.
  3. 인식된 필드, 타입 및 예시 수를 확인합니다. 가져오기에 실패하면 문제 설명을 확인합니다. 페이지에서 행별 오류 보고서를 제공하는 경우 보고서를 다운로드하고 파일을 수정한 후 다시 가져옵니다.

단일 파일의 최대 크기는 50 MiB이며, 예시는 최대 100000개, 필드는 최대 200개입니다. CSV는 UTF-8 인코딩을 사용하며, 첫 번째 행의 필드 이름은 비어 있거나 중복되어서는 안 되고 각 행의 열 수는 같아야 합니다. JSONL의 비어 있지 않은 각 행은 독립된 JSON 객체여야 하며, 같은 객체 안에서 키가 중복되면 안 됩니다. 숫자, 불리언 또는 구조화된 타입을 유지해야 할 때는 JSONL을 우선 사용하고 가져오기 결과를 확인합니다.

일반 동적 필드는 고정된 비즈니스 열을 강제하지 않습니다. Agent 작업 테스트 케이스 V1 검증에서는 case_id와 prompt가 필요합니다. 사용 중인 버전의 인터페이스에서 테스트 케이스 규격 선택을 제공할 때만 해당 규격을 선택하면 됩니다. 일반 파일에도 prompt가 필수라고 적용하지 마십시오.

3. 필드 및 예시 편집​

  1. 필드 페이지에서 필드의 이름을 변경하거나 순서를 조정하거나 삭제합니다. 새 필드는 먼저 로컬 초안으로 유지하고 확인 후 저장합니다.
  2. 예시 페이지에서 Case를 추가, 편집 또는 삭제합니다. 필드 영역과 예시 영역은 각각 저장합니다. 한쪽을 저장해도 다른 쪽의 초안이 자동으로 제출되지 않습니다.
  3. 일괄 추가는 항목별로 제출합니다. 일부만 성공하면 이미 저장한 내용은 유지되므로 나머지 초안만 처리하여 중복 추가를 방지합니다.

필드나 예시를 삭제하기 전에 내용을 확인합니다. 과거 작업은 동결된 스냅샷을 사용하므로 기존의 과거 평가는 작업 사본에 따라 변경되지 않습니다. 여러 사람이 동시에 편집하다 충돌이 발생하면 먼저 자신의 입력 내용을 보존한 다음 새로고침하여 최신 내용을 확인합니다.

4. 작업 사본과 버전 이해하기​

작업 사본은 편집을 계속하는 데 사용되며, 유효하게 저장하면 읽기 전용 버전이 생성됩니다. 새 작업은 아직 저장하지 않은 로컬 초안이 아니라 게시된 버전을 바인딩합니다. 버전 기록에서 버전 번호, 게시 시간 및 동결된 내용을 확인합니다. 실질적인 변경이 없으면 새 버전이 중복 생성되지 않습니다.

변경 사항은 저장되었으나 버전 게시에 실패했습니다라는 알림이 표시되면 버전 게시 재시도를 사용합니다. 데이터는 이미 저장되었으므로 필드나 예시를 중복 추가하지 마십시오. 이후 저장해도 이전 버전을 덮어쓰거나 과거 Run을 업데이트하지 않습니다.

5. 내보내기 및 참조 보기​

  1. 상세에서 내보내기를 클릭하고 CSV 또는 JSONL을 선택한 다음 백그라운드에서 파일이 생성될 때까지 기다려 다운로드합니다. 구조화된 필드의 의미를 유지해야 할 때는 JSONL을 우선 사용합니다.
  2. 참조 기록을 열어 해당 평가 세트를 사용하는 작업을 확인하고 해당 작업으로 이동하여 결과와 동결된 버전을 확인합니다.

리스트는 이름 검색과 상태 필터를 지원합니다. 평가 세트를 삭제하면 휴지통 상태로 전환되고 과거 결과는 유지됩니다. 이것이 인터페이스에서 복구 진입점을 제공한다는 의미는 아닙니다. AI Monitor 온라인 가져오기는 현재 이 버전에서 기본으로 표시되는 작업 진입점으로 공개되지 않았습니다.

6. 다음 단계 및 관련 페이지​

사용 설명서 홈으로 돌아가기:

AI 평가 플랫폼

이 문서가 도움이 되었나요?