ワークフロー定義

概要 ワークフロー定義についてのDocsです。 プラン上の制約 ワークフロー定義は、 Free プランまたは Essential プラン以上の契約アカウントでのみ、ご利用いただけます。 ワークフローの中に組み込む転送ジョブやデータマートジョブなどの1個ずつの単位を「タスク」と呼びます。 ワークフロー定義では、タスクの順序と組み合わせを設定することで、一連のフローを作成します。 ワークフローに定義...

概要 データチェックとは ワークフロー内に設定できるタスクのひとつです。 DWHに対するクエリ結果とエラー条件を突合し、条件に合致する場合に該当のタスクをエラーとする機能です。 たとえば、ある列に入っている特定の文字列をカウントし、2以上の結果だった場合にデータ重複とみなしエラーとする、などのケースで利用できます。 データチェックに対応するDWH Google BigQuery Snowflake Amazon Redshift 設定方法 Goog...

概要 カスタム変数ループ実行とは、カスタム変数を埋め込んだ転送設定・データマート定義を、ワークフロー定義上に組み込んだときに設定できる機能です。 本ページでは、カスタム変数ループ実行の概要、および設定内容について、ユースケースを交えてご紹介します。 カスタム変数ループ実行とは カスタム変数ループ実行では、タスクに埋め込んだカスタム変数に対して、 複数の値を展開 するよう設定できます。 この設定を施したタスクがワークフロージョブ内で実行されると、「カスタム変数に値を展開し、それを...