개요
Amazon Web Services의 S3에 Apache Parquet(.parquet) 형식으로 데이터를 전송하는 설정 도움말 페이지입니다.
제약조건
- 특별히 없음
설정 항목
STEP1 기본 설정
| 품목명 | 필수 | 기본값 | 내용 |
|---|---|---|---|
| S3 연결 정보 | 예 | ----------------------------------------------------------------------------------------------. | 미리 등록되어 있는 접속 정보 중 이번 전송 설정에 필요한 권한을 가진 접속 정보를 선택합니다. 연결 정보 설정 방법은 별도 페이지를 참고하세요. |
| 지역 | 예 | ap-northeast-1 | 사용할 버킷을 생성할 때 지정한 지역을 입력하세요. 리전에 대한 자세한 설명은 AWS 공식 페이지를 참고하시기 바랍니다. |
| 버킷 | 예 | ----------------------------------------------------------------------------------------------. | 데이터 적재 대상 버킷 이름을 지정해 주세요. |
| 패스 프리픽스 | 예 | ----------------------------------------------------------------------------------------------. | 데이터 적재 대상 경로 접두사를 지정해 주세요. TROCCO는 전송 대상 버킷에 경로 접두사로 시작하는 여러 파일을 출력합니다. 사용자 정의 변수를 이용하여 TROCCO 데이터 적재 시 동적으로 설정값을 결정하는 것도 가능하다. |
| 압축 형식 | 예 | 비압축 | 파일 압축 방식을 지정합니다. 압축되지 않은 snappy gzip lzo broti lz4 zstd 에서 선택할 수 있습니다. |
STEP2 세부 설정
| 품목명 | 기본값 | 내용 |
|---|---|---|
| 다중 파일 출력 시 명명 규칙 | . %03d.%02d | 여러 파일을 출력할 때 파일 이름에 대한 규칙을 설정할 수 있습니다. |
| 출력 파일 확장자 | 쪽모이 세공 | ----------------------------------------------------------------------------------------------. |
| 기본 타임스탬프 형식 | Y-%m-%d %H:%M:%S.%S.%6N %z | ----------------------------------------------------------------------------------------------. |
| 기본 시간대 | UTC | ----------------------------------------------------------------------------------------------. |
| 블록 크기(byte) | 134217728 | ----------------------------------------------------------------------------------------------. |
| 페이지 크기(byte) | 1048576 | ----------------------------------------------------------------------------------------------. |
| 최대 패딩 사이즈(byte) | 8388608 | ----------------------------------------------------------------------------------------------. |
| 데이터 카탈로그 설정 | 하지 않는다 | ----------------------------------------------------------------------------------------------. |
| 컬럼 설정 | ----------------------------------------------------------------------------------------------. | ----------------------------------------------------------------------------------------------. |