転送元 - trocco
- 29 May 2023
- 1 分で読み終わります
- 印刷
- ダークライト
転送元 - trocco
- 更新日 29 May 2023
- 1 分で読み終わります
- 印刷
- ダークライト
Article Summary
概要
troccoで保持しているデータを転送する設定のヘルプページです。
転送元troccoでは、以下のいずれかのデータを転送できます。
- データカタログ
- データカタログに保持しているメタデータを転送できます。
- 転送設定
- 過去に実行された転送ジョブに関する履歴データを転送できます。
制約
補足
データカタログのデータを転送するには、データカタログ機能の有効化が必要になります。
ご利用になる場合は、営業担当者またはカスタマーサクセスまでお問い合わせください。
転送できるジョブ実行履歴
転送ジョブに関する実行履歴のみ、転送できます。
データマートジョブ、ワークフロージョブ、dbtジョブに関する実行履歴は転送できません。
ジョブ実行履歴を取得できる期間
ジョブ実行履歴の転送実行日時を起点に、最大で過去1年前までに実行されたジョブの履歴データを転送できます。
それ以前に実行されたジョブの履歴データは、転送できません。
設定項目
STEP1 基本設定
項目名 | 必須 | 内容 |
---|---|---|
対象 | Yes | 転送する対象を以下から選択します。 |
データタイプ | Yes | 転送するデータタイプを以下から選択します。
|
データ取得期間 | Yes | 転送設定を選択した場合、転送したいデータの開始日時と終了日時を入力します。YYYY-MM-DD またはYYYY-MM-DD HH:mm:ss 形式で入力してください。HH:mm:ss を指定しなかった場合、00:00:00 が代わりに指定されます。 |
タイムゾーン | Yes | 転送設定を選択した場合、データ取得期間のタイムゾーンを設定します。 |
STEP2 詳細設定
本コネクタに固有の詳細設定はありません。
転送項目
以下は、各対象・各データタイプで転送される項目の一覧です。
データカタログ
ユーザー定義メタデータ
転送できるデータタイプは、以下の2つから選択できます。
メタデータ転送対象のテーブル
基本メタデータ、ユーザー定義メタデータの少なくとも一方が入力済みのテーブル・カラムのメタデータのみ、転送されます。
カラム名 | 型 | 説明 |
---|---|---|
bigquery_project_id | string | BigQueryに関するメタデータのプロジェクト |
bigquery_dataset | string | BigQueryに関するメタデータのデータセット |
bigquery_table | string | BigQueryのテーブル名 |
bigquery_column | string | BigQueryのカラム名 データタイプにユーザー定義メタデータ(BigQueryカラム情報) を選択した場合のみ、転送されます。 |
trocco_metadata_logical_name | string | 基本メタデータの論理名 |
trocco_metadata_description | string | 基本メタデータの説明 |
trocco_metadata_last_updated_at | timestamp | 基本メタデータの最終更新日時 |
(ユーザー定義メタデータ用テンプレートで定義したフィールド) | (詳細は後述) | ユーザー定義メタデータの値 |
user_defined_metadata_last_updated_at | timestamp | ユーザー定義メタデータの最終更新日時 |
ユーザー定義メタデータ用テンプレートで定義したフィールド
データ型について
テンプレートで定義したデータ型は、以下の型に変換されます。String
->string
Text(Markdown)
->string
Integer
->long
Boolean
->boolean
カラム名について
- ユーザー定義メタデータ用テンプレートで定義したフィールド名に英数字以外の文字が使われている場合、転送先のコネクタによっては転送できないことがあります。
- 上記の場合、転送設定STEP2のカラム定義にて、英数字のみで構成されたカラム名に変更してください。
カラム参照一覧
カラム参照一覧を転送します。
カラム名 | 型 | 説明 |
---|---|---|
bigquery_src_project_id | string | BigQueryに関するメタデータのプロジェクト(参照元) |
bigquery_src_dataset | string | BigQueryに関するメタデータのデータセット(参照元) |
bigquery_src_table | string | BigQueryのテーブル名(参照元) |
bigquery_src_column | string | BigQueryのカラム名(参照元) |
bigquery_dst_project_id | string | BigQueryに関するメタデータのプロジェクト(参照先) |
bigquery_dst_dataset | string | BigQueryに関するメタデータのデータセット(参照先) |
bigquery_dst_table | string | BigQueryのテーブル名(参照先) |
bigquery_dst_column | string | BigQueryのカラム名(参照先) |
creation_type | string | カラム参照の作成方法trocco_data_source user |
created_by | string | カラム参照の作成者のメールアドレス |
last_updated_at | timestamp | カラム参照の最終更新日時 |
転送設定
ジョブ実行履歴
過去に実行された転送ジョブに関する履歴データを転送します。
カラム名 | 型 | 説明 |
---|---|---|
job_id | long | 転送ジョブのID |
job_url | string | 転送ジョブのURL |
job_definition_id | long | 転送ジョブの元となった転送設定のID |
job_definition_url | string | 転送ジョブの元となった転送設定のURL |
job_definition_name | string | 転送ジョブの元となった転送設定の名前 |
executor_type | string | 転送ジョブの実行方法manual :手動実行scheduler :スケジュール実行workflow :ワークフローのタスクとして実行api :APIによる実行job_dependency :トリガージョブによる実行 |
status | string | 転送ジョブのステータスqueued :実行待ちskipped :実行完了(スキップ)setting_up :実行準備中executing :実行中interrupting :実行中断中canceled :実行完了(キャンセル)succeeded :実行完了(成功)error :実行完了(エラー) |
transferred_records | long | 転送ジョブの転送されたレコード数 |
transfer_bytes | long | 転送ジョブの転送サイズ(バイト) |
skipped_records | long | 転送ジョブのスキップされたレコード数 |
started_at | timestamp | 転送ジョブの開始日時(%Y-%m-%d %H:%M:%S %Z ) |
finished_at | timestamp | 転送ジョブの終了日時(%Y-%m-%d %H:%M:%S %Z ) |
created_at | timestamp | 転送ジョブの実行日時(%Y-%m-%d %H:%M:%S %Z ) |
この記事は役に立ちましたか?