한 장의 그림으로 이해하기

그림 크게 보기 ↗ (새 탭)
도입·운영 · 판정 관망
그림을 글로 풀면
ETag 비교 전에 기준 확인
멀티파트 업로드의 ETag는 전체 객체의 MD5가 아닙니다.
- 대상
- S3로 AI 학습·평가 자료를 옮기는 운영자
- 무엇이 바뀜
- 전체 파일 계산값과 부분별 계산값을 결합한 값은 구분해야 합니다.
- 왜 중요한가
- 다른 기준의 값이 다르다는 이유만으로 자료 손상을 확정할 수 없습니다.
- 지금 할 일
- 체크섬 알고리즘과 전체·복합 유형을 맞춘 뒤 값을 대조합니다.
- 한계·미확인
- 분할 업로드 개념 비유. S3 전송·체크섬 실행 시험 없음.
- 공식 출처
- docs.aws.amazon.com
- 확인일
- 2026-10-04
자료를 다시 올리기 전에 비교한 값부터 보기
가상의 평가 자료를 여러 부분으로 나눠 S3에 올린 뒤 로컬 파일의 MD5와 ETag를 비교했다고 생각해 봅니다. 두 값이 다르다는 이유만으로 파일이 깨졌다고 결론 내리면 불필요한 재전송을 할 수 있습니다. 그림의 온전한 상자와 서로 다른 비교 틀은 데이터 상태와 비교 기준을 먼저 분리하자는 자체 비유입니다. 실제 무결성을 확인했다는 의미는 아닙니다.
분할 업로드에서는 전체 MD5로 읽지 않기
AWS 문서는 멀티파트 업로드로 생성된 객체의 ETag가 전체 객체의 MD5 요약값이 아니라고 설명합니다. 따라서 ETag라는 필드 이름만 보고 로컬 전체 파일 MD5와 동일한 방식으로 계산됐다고 가정하지 않습니다. 반대로 모든 ETag가 언제나 MD5와 무관하다는 뜻도 아닙니다. 단일 요청으로 생성한 객체에서는 생성 방식과 암호화 조건에 따라 MD5가 될 수 있으므로 적용 조건을 확인해야 합니다.
알고리즘과 계산 범위를 함께 기록하기
체크섬은 자료에서 계산한 비교용 값입니다. S3 문서는 파일 전체를 대상으로 한 FULL_OBJECT와 각 부분의 체크섬을 결합한 COMPOSITE를 구분합니다. AINOW는 원본·대상 파일 식별 정보와 알고리즘, 체크섬 유형, 비교 결과를 한 기록에 남기도록 제안합니다. 지원되는 알고리즘과 유형 조합을 공식 문서에서 확인한 뒤 같은 기준으로 대조해야 합니다. 이번에는 S3 업로드·다운로드나 손상 파일 검증을 실행하지 않았습니다.
참고 원문: Amazon S3 공식 문서 — 업로드 무결성, 전체·복합 체크섬 · 원문 게시일 상시 문서(확인일 기준) · 확인일 2026-10-04
AI 작성·자동 검증: 공식 자료와의 대조 및 게시 구조 검사. 사람의 개별 검수와 제품 실행 시험은 수행하지 않았습니다. 그림은 신규 생성한 개념 일러스트입니다.
이 글의 검증 카드
- 자료 버전
- Amazon S3 상시 문서2026-10-04 확인. multipart ETag와 whole-object MD5 차이 및 full/composite checksum. AWS S3 Object API 문서도 교차 확인. 전송·손상·체크섬 시험 없음
- 확인일
- 2026-10-04
- 검증 상태
- 개발자 주장
- 한계·주의
- 분할 업로드 개념 비유. S3 전송·체크섬 실행 시험 없음.
함께 더 정확하게
질문·오류 제보
그림에서 이해되지 않는 부분이나 달라진 내용을 알려 주세요. 관리자가 확인하고 승인한 글만 공개됩니다.
개발에서는 이메일 인증 가입 또는 관리자 발급 계정으로 참여할 수 있습니다. 계정·이용 문의
아직 계정이 없으신가요? 회원가입
공개된 질문·제보
아직 공개된 질문·제보가 없습니다. 궁금한 부분을 먼저 남겨 주세요.