한 장의 그림으로 이해하기

그림 크게 보기 ↗ (새 탭)
도입·운영 · 판정 관망
그림을 글로 풀면
일반 사례 옆에 예외 사례 놓기
정돈된 입력의 성공만 보지 말고 정보가 빠진 입력의 처리 기준도 정합니다.
- 대상
- AI 업무 도입 여부를 평가하는 담당자
- 무엇이 바뀜
- 공식 문서는 실제 업무 분포와 예외를 평가에 넣도록 안내합니다.
- 왜 중요한가
- 쉬운 사례만으로는 애매한 입력의 처리 능력을 알기 어렵습니다.
- 지금 할 일
- 예외 입력과 기대 동작을 정하고 결과를 따로 기록합니다.
- 한계·미확인
- 그림은 가상 예시입니다. 모델 실행·점수 측정·도입 효과 검증은 하지 않았습니다.
- 공식 출처
- platform.claude.com
- 확인일
- 2026-09-19
반듯한 소포만 통과시키는 시연의 빈칸
가상의 접수 보조 AI를 평가할 때 완성된 신청서만 넣으면 정보가 빠진 신청서에서 어떤 일이 생길지 알기 어렵습니다. 그림에서는 온전한 소포와 훼손되거나 이름표가 빈 소포를 나란히 놓았습니다. 이는 이 글이 만든 비유이며 특정 모델의 실패 사례가 아닙니다. Anthropic은 실제 업무 분포를 반영하는 평가와 예외 사례를 함께 설계하도록 안내합니다.
예외에도 기대 동작이 있어야 평가할 수 있다
공식 문서는 구체적이고 측정 가능한 성공 기준을 정하고, 누락·무관한 입력이나 판단이 모호한 사례 등을 고려하도록 설명합니다. 이 글에서는 정보가 부족할 때 추가 확인을 요청해야 하는지, 처리를 보류해야 하는지 업무 담당자가 먼저 정하는 방법을 제안합니다. 그림의 멈춤 동작은 그 설계 예시이며 Claude가 항상 자동으로 보류한다는 보장은 아닙니다.
하나의 통과 인상 대신 항목별 기록 남기기
일반 입력과 예외 입력의 결과를 나누고, 기준을 충족했는지와 어떤 후속 조치가 필요했는지를 함께 적어 두는 방식을 제안합니다. 품질뿐 아니라 실제 업무에서 중요한 응답 시간 등도 별도 기준으로 둘 수 있습니다. 이 글은 적절한 사례 수나 통과 점수를 정하지 않았으며 모델을 실행해 측정한 결과도 없습니다. 예외를 모두 나열했다고 실제 업무의 모든 위험을 다뤘다고 볼 수는 없습니다.
참고 원문: Anthropic 성공 기준과 평가 설계 공식 문서 · 원문 게시일 상시 문서(게시일 별도 미표기) · 확인일 2026-09-19
AI 작성·자동 검증: 공식 자료와의 대조 및 게시 구조 검사. 사람의 개별 검수와 제품 실행 시험은 수행하지 않았습니다. 그림은 신규 생성한 개념 일러스트입니다.
이 글의 검증 카드
- 자료 버전
- Claude Platform 평가 설계 상시 문서·2026-09-19 확인; 모델 실행·평가 점수 측정 없음
- 확인일
- 2026-09-19
- 검증 상태
- 개발자 주장
- 한계·주의
- 그림은 가상 예시입니다. 모델 실행·점수 측정·도입 효과 검증은 하지 않았습니다.
함께 더 정확하게
질문·오류 제보
그림에서 이해되지 않는 부분이나 달라진 내용을 알려 주세요. 관리자가 확인하고 승인한 글만 공개됩니다.
개발에서는 이메일 인증 가입 또는 관리자 발급 계정으로 참여할 수 있습니다. 계정·이용 문의
아직 계정이 없으신가요? 회원가입
공개된 질문·제보
아직 공개된 질문·제보가 없습니다. 궁금한 부분을 먼저 남겨 주세요.