テーブルデータ入力処理

オペレーション名

テーブルデータ入力

機能概要

Google Cloud Storage上にあるファイルからデータを取得して、Google BigQuery上のテーブルに書き込みます。

プロパティ

変数の使用については、「変数」を参照してください。
基本設定
項目名 必須/省略可 変数の使用 説明 備考
名前 必須 使用不可 スクリプトキャンバス上での名前を入力します。  
必須設定
項目名 必須/省略可 変数の使用 説明 備考
接続先 必須 使用不可 グローバルリソースを選択します。
  • [追加]:
    新規にグローバルリソースを追加します。
  • [一覧の編集]:
    「リソース一覧の編集」画面にて、グローバルリソースの設定を編集することができます。
 
バケット名 必須 使用可 バケット名を選択または入力します。  
フォルダパス 必須 使用可 フォルダパスを選択または入力します。
  • フォルダパスはGoogle Cloud Storage上の絶対パスで指定してください。
  • 先頭と末尾に「/」を指定してください。
  • 「//」を含めることはできません。
ファイル名 必須 使用可 ファイル名を選択または入力します。
  • 「/」を含めることはできません。
入力先プロジェクトID 必須 使用可 入力先プロジェクトIDを選択または入力します。  
入力先データセット名 必須 使用可 入力先データセット名を選択または入力します。  
入力先テーブル名 必須 使用可 入力先テーブル名を選択または入力します。
  • 指定したテーブルが存在しない場合、指定した名前で新規にテーブルを作成して書き込みます。
プロパティアクション
項目名 説明 備考
バケット名一覧の更新 指定した接続先にあるバケットを取得して、[バケット名]に設定します。
  • [接続先]を指定・変更した場合や、Google Cloud Storage上でバケットの追加・変更を行った場合、本プロパティアクションを使用することでその変更を反映させることができます。
フォルダパス一覧の更新 指定したバケットにあるフォルダパスを取得して、[フォルダパス]に設定します。
  • [バケット名]を指定・変更した場合や、Google Cloud Storage上でフォルダの追加・変更を行った場合、本プロパティアクションを使用することでその変更を反映させることができます。
  • [バケット名]に変数が設定されている場合は無効になります。
ファイル名一覧の更新 指定したフォルダパスにあるファイルを取得して、[ファイル名]に設定します。
  • [フォルダパス]を指定・変更した場合や、Google Cloud Storage上でファイルの追加・変更を行った場合、本プロパティアクションを使用することでその変更を反映させることができます。
  • [バケット名]または[フォルダパス]に変数が設定されている場合は無効になります。
入力先プロジェクトID一覧の更新 指定した接続先にあるプロジェクトを取得して、[入力先プロジェクトID]に設定します。
  • [接続先]を指定・変更した場合や、Google BigQuery上でプロジェクトの追加・変更を行った場合、本プロパティアクションを使用することでその変更を反映させることができます。
入力先データセット名一覧の更新 指定したプロジェクトにあるデータセットを取得して、[入力先データセット名]に設定します。
  • [入力先プロジェクトID]を指定・変更した場合や、Google BigQuery上でデータセットの追加・変更を行った場合、本プロパティアクションを使用することでその変更を反映させることができます。
  • [入力先プロジェクトID]に変数が設定されている場合は無効になります。
入力先テーブル名一覧の更新 指定したデータセットにあるテーブルを取得して、[入力先テーブル名]に設定します。
  • [入力先データセット名]を指定・変更した場合や、Google BigQuery上でテーブルの追加・変更を行った場合、本プロパティアクションを使用することでその変更を反映させることができます。
  • [入力先プロジェクトID]または[入力先データセット名]に変数が設定されている場合は無効になります。
読み込み設定
項目名 必須/省略可 変数の使用 説明 備考
入力ファイルフォーマット 省略可 使用不可 入力ファイルフォーマットを選択します。
  • [CSV]:(デフォルト)
    CSV形式でGoogle Cloud Storageからデータを読み取ります。
  • [TSV]:
    TSV形式でGoogle Cloud Storageからデータを読み取ります。
 
最初の行は値として取得しない 省略可 使用不可 指定したGoogle Cloud Storage上のファイルの1行目をデータとして扱うかどうかを選択します。
  • [チェックあり]:
    データとして扱いません。
  • [チェックなし]:(デフォルト)
    データとして扱います。
 
書き込み設定
項目名 必須/省略可 変数の使用 説明 備考
宛先テーブルの書き込み設定 省略可 使用不可 書き込み時のオプションを選択します。
  • [テーブルに追加する]:(デフォルト)
    データを既存のテーブルの末尾に追加します。
  • [テーブルを上書きする]:
    書き込み先のテーブル内にあるデータをすべて削除し、データを書き込みます。
 
コメント
項目名 必須/省略可 変数の使用 説明 備考
コメント 省略可 使用不可 このアダプタの簡単な説明を記述することができます。
説明を記述すると、仕様書に反映させることができます。
 

スキーマ

入力スキーマ

ありません。

出力スキーマ

ありません。

トランザクション

トランザクションはサポートしていません。

PSPでの使用について

PSPでは使用できません。

使用できるコンポーネント変数

コンポーネント変数名 説明 備考
message_category エラー発生時、発生したエラーに対応するメッセージコードのカテゴリが格納されます。
  • デフォルト値はnullです。
message_code エラー発生時、発生したエラーに対応するメッセージコードのコードが格納されます。
  • デフォルト値はnullです。
message_level エラー発生時、発生したエラーに対応するメッセージコードの重要度が格納されます。
  • デフォルト値はnullです。
error_type エラー発生時、発生したエラーの種類が格納されます。
  • デフォルト値はnullです。
  • エラーの種類は、以下のような形式となります。
    例:「java.io.FileNotFoundException」
  • DataSpider Cloudのバージョンにより、格納される内容が変わる可能性があります。
error_message エラー発生時、発生したエラーのメッセージが格納されます。
  • デフォルト値はnullです。
  • DataSpider Cloudのバージョンにより、格納される内容が変わる可能性があります。
error_trace エラー発生時、発生したエラーのトレース情報が格納されます。
  • デフォルト値はnullです。
  • DataSpider Cloudのバージョンや実行するクライアントアプリケーションにより、格納される内容が変わる可能性があります。

仕様制限

主な例外

例外名 原因 対策
ResourceNotFoundException
リソース定義が見つかりませんでした。名前:[]
[接続先]が指定されていません。 [接続先]を指定してください。
ResourceNotFoundException
リソース定義が見つかりませんでした。名前:[<グローバルリソース名>]
[接続先]で選択されたリソース定義が見つかりません。 [接続先]で指定したグローバルリソースを確認してください。
InvalidPropertyConfigurationException
<プロパティ名>が指定されていません。
[<プロパティ名>]が指定されていません。 [<プロパティ名>]を指定してください。
BigQueryServiceException
ジョブ実行に失敗しました。
ジョブ実行に失敗しました。 エラーログの内容から原因を特定し、対応を行ってください。
BigQueryServiceException
Google BigQueryに対する操作が失敗しました。
Google BigQueryに対する操作が失敗しました。 Google BigQueryのエラーメッセージ一覧ページ(https://cloud.google.com/bigquery/docs/error-messages)でエラーのステータスコードとエラーコードから原因を特定し、対応を行ってください。
CloudStorageServiceException Google Cloud Storageに対する操作が失敗しました。 Google Cloud Storageのステータスコードとエラーコード一覧ページ(https://cloud.google.com/storage/docs/json_api/v1/status-codes)でエラーのステータスコードとエラーコードから原因を特定し、対応を行ってください。
ResourceManagerServiceException Google Resource Managerに対する操作が失敗しました。 Google Resource Managerのエラーメッセージ一覧ページ(https://cloud.google.com/resource-manager/docs/core_errors)でエラーのステータスコードとエラーコードから原因を特定し、対応を行ってください。

注意事項