ファイルアップロード処理

オペレーション名

ファイルアップロード

機能概要

HDFS(Hadoop Distributed File System)にファイルをアップロードします。

プロパティ

変数の使用については、「変数」を参照してください。
基本設定
項目名 必須/省略可 変数の使用 説明 備考
名前 必須 使用不可 スクリプトキャンバス上での名前を入力します。  
必須設定
項目名 必須/省略可 変数の使用 説明 備考
接続先 必須 使用不可 グローバルリソースを選択します。
グローバルリソースの設定方法については、「グローバルリソースのプロパティ」を参照してください。
  • [追加]:
    新規にグローバルリソースを追加します。
  • [一覧の編集]:
    「リソース一覧の編集」画面にて、グローバルリソースの設定を編集することができます。
 
アップロード元ファイルパス 必須 使用可 アップロード元のファイルパスを入力します。
HDFSファイルパス 必須 使用可 HDFSファイルのパスを入力します。
  • 以下の文字を使用することはできません。
    • 「 」(半角スペース)「<」「>」「"」「^」「[」「]」「{」「}」「%」「|」「`」「:」「;」
  • マルチバイト文字を使用することはできません。
アップロードオプション
項目名 必須/省略可 変数の使用 説明 備考
上書き 省略可 使用不可 [HDFSファイルパス]に指定したファイルが存在する場合、上書きするかどうかを選択します。  
コメント
項目名 必須/省略可 変数の使用 説明 備考
コメント 省略可 使用不可 このアダプタの簡単な説明を記述することができます。
説明を記述すると、仕様書に反映させることができます。
 

スキーマ

入力スキーマ

ありません。

出力スキーマ

ありません。

トランザクション

トランザクションはサポートしていません。

PSPでの使用について

PSPでは使用できません。

使用できるコンポーネント変数

コンポーネント変数名 説明 備考
HDFSFilePath アップロード先のHDFSファイルのパスが格納されます。
  • デフォルト値はnullです。
localFilePath アップロード元のローカルファイルのパスが格納されます。
  • デフォルト値はnullです。
message_category エラー発生時、発生したエラーに対応するメッセージコードのカテゴリが格納されます。
  • デフォルト値はnullです。
message_code エラー発生時、発生したエラーに対応するメッセージコードのコードが格納されます。
  • デフォルト値はnullです。
message_level エラー発生時、発生したエラーに対応するメッセージコードの重要度が格納されます。
  • デフォルト値はnullです。
error_type エラー発生時、発生したエラーの種類が格納されます。
  • デフォルト値はnullです。
  • エラーの種類は、以下のような形式となります。
    例:「java.io.FileNotFoundException」
  • DataSpider Servistaのバージョンにより、格納される内容が変わる可能性があります。
error_message エラー発生時、発生したエラーのメッセージが格納されます。
  • デフォルト値はnullです。
  • DataSpider Servistaのバージョンにより、格納される内容が変わる可能性があります。
error_trace エラー発生時、発生したエラーのトレース情報が格納されます。
  • デフォルト値はnullです。
  • DataSpider Servistaのバージョンや実行するクライアントアプリケーションにより、格納される内容が変わる可能性があります。

仕様制限

ありません。

主な例外

例外名 原因 対策
ResourceNotFoundException
リソース定義が見つかりませんでした。名前:[]
[接続先]が指定されていません。 [接続先]を指定してください。
ResourceNotFoundException
リソース定義が見つかりませんでした。名前:[<グローバルリソース名>]
[接続先]で選択されたリソース定義が見つかりません。 [接続先]で指定したグローバルリソースを確認してください。
InvalidPropertyConfigurationException
<プロパティ名>が指定されていません。
[<プロパティ名>]が指定されていません。 [<プロパティ名>]を指定してください。
java.io.FileNotFoundException [アップロード元ファイルパス]に指定されたファイルが存在しません。 [アップロード元ファイルパス]を確認してください。
FileExistsException [HDFSファイルパス]に指定されたファイルがすでに存在します。 [HDFSファイルパス]のファイル名を変更する、または[アップロードオプション][上書き]にチェックを入れてください。
org.apache.hadoop.ipc.RemoteException
io.bytes.per.checksum(512) and blockSize(<ブロックサイズの数値>) do not match. blockSize should be a multiple of io.bytes.per.checksum
[ブロックサイズ]の値がHDFSのio.bytes.per.checksum値の倍数になっていません。 [接続先]で指定したグローバルリソースの[ブロックサイズ]の値を確認してください。