ファイル/フォルダ読み取り処理

オペレーション名

ファイル/フォルダ読み取り

機能概要

Google Cloud Storage上にあるファイル/フォルダからHULFT Square ストレージ上に読み取ります。

データモデル

本コンポーネントのデータモデルはXML型です。

プロパティ

= 備考 =

変数の使用については、「変数」を参照してください。

基本設定

項目名

必須/省略可

変数の使用

説明

備考

名前

必須

使用不可

スクリプトキャンバス上での名前を入力します。

 

必須設定

項目名

必須/省略可

変数の使用

説明

備考

接続先

必須

使用不可

コネクションリソースを選択します。

[追加]

新規にコネクションリソースを追加します。

[一覧の編集]

> HULFT INTEGRATE > コネクションで、コネクションリソースの設定を編集することができます。

 

読み取り元バケット名

必須

使用可

読み取り元のバケットを選択または入力します。

 

読み取り元フォルダパス

必須

使用可

Google Cloud Storage上のフォルダパスを選択または入力します。

  • 先頭と末尾に「/」を指定してください。

  • 「//」を含めることはできません。

注意

フォルダパスはGoogle Cloud Storage上の絶対パスで指定してください。

読み取り元ファイル/フォルダ名

必須

使用可

Google Cloud Storage上のファイル/フォルダを選択または入力します。

  • ワイルドカード(「*」および「?」)が使用できます。

保存先ディレクトリー

必須

使用可

HULFT Square ストレージのディレクトリーパスを入力します。

[参照]ボタンをクリックするとディレクトリーチューザーが起動し、ディレクトリーの選択ができます。

  • 大文字小文字を区別しません。

注意

ファイルが存在する場合は上書きする

省略可

使用不可

指定した保存先ディレクトリーに同名のファイルが存在した場合に上書きするかどうかを選択します。

[チェックあり]

指定した保存先ディレクトリーに同名のファイルが存在した場合に上書きします。

[チェックなし]

(デフォルト)

指定した保存先ディレクトリーに同名のファイルが存在した場合に上書きせずエラーとします。

 

プロパティアクション

項目名

説明

備考

読み取り元バケット名一覧の更新

指定した接続先にあるバケット名を取得して、[読み取り元バケット名]に設定します。

  • [接続先]を変更した場合や、Google Cloud Storage上でバケットを変更した場合、本プロパティアクションを使用することでその変更を反映させることができます。

  • [接続先]が指定されていない場合は無効になります。

読み取り元フォルダパス一覧の更新

指定したバケットにあるフォルダパスを取得して、[読み取り元フォルダパス]に設定します。

  • [読み取り元バケット名]を変更した場合や、Google Cloud Storage上でフォルダパスを変更した場合、本プロパティアクションを使用することでその変更を反映させることができます。

  • [接続先]または[読み取り元バケット名]が指定されていない場合は無効になります。

読み取り元ファイル/フォルダ名一覧の更新

指定したフォルダパスにあるファイル/フォルダ名を取得して、[読み取り元ファイル/フォルダ名]に設定します。

  • [読み取り元フォルダパス]を変更した場合や、Google Cloud Storage上でファイル/フォルダ名を変更した場合、本プロパティアクションを使用することでその変更を反映させることができます。

  • [接続先][読み取り元バケット名]または[読み取り元フォルダパス]が指定されていない場合は無効になります。

データ処理方式

項目名

必須/省略可

変数の使用

説明

備考

データ処理方式

必須

使用不可

データ処理方式を選択します。

[スクリプトの設定を使用する]

(デフォルト)

スクリプトプロパティの大容量データ処理の設定をコネクターに使用します。

[大容量データ処理を行わない]

大容量データ処理を行いません。

[大容量データ処理を行う]

大容量データ処理を行います。

 

コメント

項目名

必須/省略可

変数の使用

説明

備考

コメント

省略可

使用不可

このコネクターの簡単な説明を記述することができます。

 

スキーマ

入力スキーマ

ありません。

出力スキーマ

<?xml version="1.0"?>
<bucket name="" status="" >
  <file errorcode="" localpath="" name="" remotepath="" size="" status="" statuscode="" type="" updated=""/>
</bucket>

要素名

属性名

説明

備考

bucket

-

取得したバケットごとに出現します。

 

name

取得したバケットの名前を出力します。

 

status

取得したバケットの状態を出力します。

Exist

バケットが存在している状態です。

ErrorBucketNotFound

指定した[読み取り元バケット名]がGoogle Cloud Storage上に存在しない状態です。指定したバケット名が誤っている可能性があります。

 

file

-

読み取りを行ったファイル/フォルダごとに出現します。

 

errorcode

Google Cloud Storageでエラーが発生した場合、Google Cloud Storageで定義されているAPIエラーコードを出力します。

  • Google Cloud Storageでエラーが発生しない場合は値が空白になります。

  • Google Cloud Storageで定義されているAPIエラーコードについては、(https://cloud.google.com/storage/docs/json_api/v1/status-codes)を参照してください。

localpath

読み取りを行ったファイル/フォルダのローカルパスを出力します。

  • statusが「RemoteFileNotFound」の場合は値が空白になります。

  • statusが「Error」の場合は値が空白になることがあります。

name

読み取りを行ったファイル/フォルダのGoogle Cloud Storage上の名前を出力します。

  • statusが「RemoteFileNotFound」の場合は値が空白になります。

  • statusが「LocalFileNotFound」の場合は値が空白になります。

  • statusが「Error」の場合は値が空白になります。

remotepath

読み取りを行ったファイル/フォルダのGoogle Cloud Storage上のファイルパスを出力します。

  • statusが「LocalFileNotFound」の場合は値が空白になります。

  • statusが「LocalFileExist」かつtypeが「Folder」の場合は値が空白になります。

  • statusが「Downloaded」かつtypeが「Folder」の場合は値が空白になります。

  • statusが「Error」の場合は値が空白になることがあります。

size

読み取りを行ったファイル/フォルダがファイルの場合、サイズを出力します。単位はバイトです。

  • ファイル/フォルダが正常に読み取られなかった場合は値が空白になります。

  • フォルダの場合は値が空白になります。

status

読み取りを行ったファイル/フォルダの状態を出力します。

Downloaded

ファイル/フォルダが読み取られた状態です。

RemoteFileNotFound

Google Cloud Storage上で、[読み取り元フォルダパス]に指定されたフォルダパス内に指定した[読み取り元ファイル/フォルダ名]が存在しない状態です。

LocalFileNotFound

指定した[保存先ディレクトリー]が存在しない状態です。

LocalFileExist

[読み取り元フォルダパス]または[読み取り元ファイル/フォルダ名]と同名のファイル/フォルダが[保存先ディレクトリー]に存在する状態です。ただし、[ファイルが存在する場合は上書きする][チェックあり]の場合、ファイルが上書きされ、「Downloaded」になります。

Error

エラーが発生したため、ファイル/フォルダが読み取られなかった状態です。

 

statuscode

Google Cloud Storageでエラーが発生した場合、Google Cloud Storageで定義されているAPIステータスコードを出力します。

  • Google Cloud Storageでエラーが発生しない場合は値が空白になります。

  • Google Cloud Storageで定義されているAPIステータスコードについては、(https://cloud.google.com/storage/docs/json_api/v1/status-codes)を参照してください。

type

読み取りを行ったファイル/フォルダの種別を出力します。

File

ファイル

Folder

フォルダ

 

updated

読み取りを行ったファイル/フォルダがファイルの場合、最終更新日時を出力します。

  • ファイル/フォルダが正常に読み取られなかった場合は値が空白になります。

  • フォルダの場合は値が空白になります。

Mapperでのスキーマ読み込み

スキーマは自動で読み込まれます。

= 備考 =

詳細については、「スキーマ編集」を参照してください。

大容量データ処理

大容量データ処理に対応しています。

PSPでの使用について

PSPでは使用できません。

使用できるコンポーネント変数

コンポーネント変数名

説明

備考

count

対象のファイル/フォルダの件数が格納されます。

  • デフォルト値はnullです。

message_category

エラー発生時、発生したエラーに対応するメッセージコードのカテゴリが格納されます。

  • デフォルト値はnullです。

message_code

エラー発生時、発生したエラーに対応するメッセージコードのコードが格納されます。

  • デフォルト値はnullです。

message_level

エラー発生時、発生したエラーに対応するメッセージコードの重要度が格納されます。

  • デフォルト値はnullです。

error_type

エラー発生時、発生したエラーの種類が格納されます。

  • デフォルト値はnullです。

  • エラーの種類は、以下のような形式となります。

    例:「java.io.FileNotFoundException」

error_message

エラー発生時、発生したエラーのメッセージが格納されます。

  • デフォルト値はnullです。

error_trace

エラー発生時、発生したエラーのトレース情報が格納されます。

  • デフォルト値はnullです。

メッセージコード、例外メッセージ、制限事項

コネクター

メッセージコード

例外メッセージ

制限事項

Google Cloud Storage コネクターのメッセージおよび制限事項

check

check

check