概要
Amazon Web ServicesのS3からデータを転送する設定のDocsです。
制約
- 転送容量の制限あり
設定項目
STEP1 基本設定
| 項目名 | 必須 | デフォルト値 | 内容 |
|---|---|---|---|
| S3接続情報 | Yes | - | あらかじめ登録してある接続情報から、今回の転送設定に必要な権限を持つものを選択します。 接続情報の設定方法は別ページ をご参照ください。 |
| リージョン | Yes | ap-northeast-1 | 転送元S3バケットのリージョンを入力してください。 なお、リージョンについての説明はAWSの公式ページをご参照ください。 |
| バケット | Yes | - | 転送元のS3バケット名を入力してください。 |
| パスプレフィックス | No | - | 転送対象のデータを、パスプレフィックスで指定してください。 ディレクトリ名までを指定した場合、ディレクトリ配下の（プレフィックスにマッチする）全ファイルを転送します。 一方ファイル名までを指定した場合、そのファイルのみを転送します。 カスタム変数 を利用し、TROCCOのデータ転送時に動的に設定値を決定することも可能です。 |
| パスの正規表現 | No | - | 正規表現を入力することで、パスプレフィックス配下のどのファイルを転送対象とするか指定できます。 未入力の場合、パスプレフィックスにマッチするすべてのファイルが対象になります。 |
| 解凍形式 | Yes | 非圧縮ファイルまたはbzip2/gzip | 転送元のデータが圧縮されている場合に、解凍して転送できます。 以下の解凍形式に対応しています。転送対象のデータの圧縮形式に沿って選択してください。
変更後は、STEP2に進む際に必ず自動データ設定を行ってください。 |
| 解凍後の相対パス (正規表現) | No | - | 解凍形式にてzipまたはtar.gzを選択した場合に入力できます。圧縮ファイル内の特定のフォルダまたはファイルを転送したい場合に入力してください。 パス区切り文字を含める場合は、バックスラッシュ（ \）を用いてエスケープしてください。 |
| 入力ファイル形式 | Yes | CSV/TSV | 入力ファイルの形式を指定してください。 詳しくは、入力ファイル形式の設定についてを参照ください。 |
| CSV/TSV入力設定 | Yes | ヘッダー行を含むCSV/TSVファイル | 入力ファイル形式でCSV/TSVを選択した場合に選択します。 ヘッダー行を含まないCSV/TSVファイルを選択した場合、TROCCO側で生成した仮のヘッダー名がカラム名に割り当てられます。 |
| 転送方法 | Yes | 全件転送 | 全件転送・差分転送 (最終パス)・**差分転送 (最終更新時間)**のいずれかを選択します。 差分転送について、詳しくは差分転送機能を参照ください。 |
STEP2 詳細設定
| 項目名 | 必須 | デフォルト値 | 内容 |
|---|---|---|---|
| 指定のパスにファイルが存在しなかった場合に転送を続行するか | Yes | 転送を続行する | 基本設定にて指定したパスにファイルが見つからなかった場合に転送を続行させるかどうかお選びいただけます。 転送を続行するを選択した場合は0件転送したとして転送ジョブが完了します。 転送を中止し、エラーにするを選択した場合はエラーとして転送ジョブを中止します。 |