集計処理
オペレーション名
集計
機能概要
入力データを集計します。
プロパティ
基本設定
項目名 |
必須/省略可 |
変数の使用 |
説明 |
備考 |
---|---|---|---|---|
名前 |
必須 |
使用不可 |
スクリプトキャンバス上での名前を入力します。 |
|
入力データ |
必須 |
使用不可 |
スクリプトキャンバス上にあるコンポーネントを選択します。 |
|
必須設定
項目名 |
必須/省略可 |
変数の使用 |
説明 |
備考 |
---|---|---|---|---|
グループキー設定 |
省略可 |
- |
集計処理のキーとなる列を指定します。 各列は以下のボタンで操作することができます。
|
注意
データ型がbyte[]型の列を指定して集計することはできません。 |
グループキー設定/列名 |
必須 |
使用不可 |
キーとなる列の列名を選択します。 |
|
集計設定
項目名 |
必須/省略可 |
変数の使用 |
説明 |
備考 |
---|---|---|---|---|
集計対象設定 |
省略可 |
- |
集計対象となる列と集計関数を指定します。 各列は以下のボタンで操作することができます。
|
|
集計対象設定/列名 |
必須 |
使用不可 |
集計対象となる列の列名を選択します。 |
|
集計対象設定/関数 |
必須 |
使用不可 |
集計対象を処理するための集計関数を選択します。 |
|
出力設定
項目名 |
必須/省略可 |
変数の使用 |
説明 |
備考 |
---|---|---|---|---|
出力を手動で設定 |
省略可 |
使用不可 |
出力対象となる列または集計結果を手動で設定するかどうかを選択します。
|
|
出力対象設定 |
省略可 |
- |
出力対象となる列または集計結果を指定します。 各列は以下のボタンで操作することができます。
|
|
出力対象設定/データ元 |
必須 |
使用不可 |
出力対象のデータ元を選択します。
|
|
コメント
項目名 |
必須/省略可 |
変数の使用 |
説明 |
備考 |
---|---|---|---|---|
コメント |
省略可 |
使用不可 |
このコネクターの簡単な説明を記述することができます。 |
|
スキーマ
入力スキーマ
入力元コンポーネントのスキーマと同じです。
Mapperでのスキーマ読み込み
出力スキーマは自動で読み込まれますが、入力スキーマは手動で読み込む必要があります。
読み取りを行うデータのスキーマを指定してください。
詳細については、「スキーマ編集」を参照してください。
大容量データ処理
大容量データ処理には対応していません。
PSPでの使用について
PSPでは使用できません。
使用できるコンポーネント変数
コンポーネント変数名 |
説明 |
備考 |
---|---|---|
message_category |
エラー発生時、発生したエラーに対応するメッセージコードのカテゴリが格納されます。 |
|
message_code |
エラー発生時、発生したエラーに対応するメッセージコードのコードが格納されます。 |
|
message_level |
エラー発生時、発生したエラーに対応するメッセージコードの重要度が格納されます。 |
|
error_type |
エラー発生時、発生したエラーの種類が格納されます。 |
|
error_message |
エラー発生時、発生したエラーのメッセージが格納されます。 |
|
error_trace |
エラー発生時、発生したエラーのトレース情報が格納されます。 |
|
入力元コンポーネントのスキーマ変更について
-
[入力データ]に指定したコンポーネントのスキーマを変更した場合、集計処理にその変更を反映させるため、集計処理のプロパティ設定ダイアログを開いて[完了]ボタンをクリックしてください。
-
[入力データ]に指定したコンポーネントのスキーマ構造を変更(スキーマの要素の順序変更や削除など)した場合、[グループキー設定/列名]や[集計対象設定/列名]、[出力対象設定/データ元]の設定も合わせて変更する必要があります。
これは、集計処理が列情報を名前ではなく順序(インデックス)で保持しているためです。
nullと空文字について
-
[グループキー設定]で指定した列の値にnullまたは空文字が存在する場合、nullまたは空文字をグループキーの値として処理します。
-
[集計対象設定]で以下の集計関数を指定している列の値にnullまたは空文字が存在する場合、エラーが発生します。
-
合計値
-
最小値(数値)
-
最大値(数値)
-
最小値(日付/時間)
-
最大値(日付/時間)
-
集計関数は性質上、一部の処理に入力として使用可能なデータ型に制限があります。また、集計結果のデータ型が入力と異なる場合があります。
データ型の詳細については、「データ型」を参照してください。
集計関数 |
説明 |
入力のデータ型使用可否 |
集計結果のデータ型 |
||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|
byte |
short |
int |
long |
float |
double |
BigDecimal |
boolean |
String |
Date |
|
|||
ユニーク件数 |
ユニーク値の数を集計します。 |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
× |
int |
最初の値 |
最初の値を抽出します。 |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
入力のデータ型 |
最後の値 |
最後の値を抽出します。 |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
入力のデータ型 |
最初の非NULL値 |
最初のNULLでない値を抽出します。 |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
入力のデータ型 |
最後の非NULL値 |
最後のNULLでない値を抽出します。 |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
入力のデータ型 |
合計値 |
数値として合計値を計算します。 |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
× |
○ |
× |
× |
BigDecimal |
最小値(数値) |
数値として最小値を抽出します。 |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
× |
○ |
× |
× |
入力のデータ型 |
最大値(数値) |
数値として最大値を抽出します。 |
○ |
○ |
○ |
○ |
○ |
○ |
○ |
× |
○ |
× |
× |
入力のデータ型 |
最小値(日付/時間) |
日時としてもっとも早い値を抽出します。 |
× |
× |
× |
× |
× |
× |
× |
× |
○ |
○ |
× |
入力のデータ型 |
最大値(日付/時間) |
日時としてもっとも遅い値を抽出します。 |
× |
× |
× |
× |
× |
× |
× |
× |
○ |
○ |
× |
入力のデータ型 |
-
表の見方
マーク
説明
○
入力として使用できます。
×
入力として使用できません。
内部データ型のcharはStringとして扱います。
-
並列処理をサポートしています。
= 備考 =並列処理の仕様制限については、「仕様制限」を参照してください。
-
[グループキー設定]、[集計対象設定]、および[出力対象設定]を指定する際には、入力元コンポーネントの出力スキーマが設定されている必要があります。
スキーマを手動で設定するコンポーネントの場合は、Mapperでスキーマを読み込んでください。
-
集計処理の結果データの順序は保証されません。
-
入力元のコンポーネントが大容量データ処理を行う場合でも、集計処理では一時的にデータをメモリ中に保持します。
そのためデータが大きい場合には、大容量データ処理時にもOutOfMemoryErrorが発生する可能性があります。
例外名 |
原因 |
対策 |
---|---|---|
InputDataNotFoundException |
[入力データ]が指定されていません。 |
[入力データ]を指定する、またはデータフローを引いてください。 |
InvalidInputTypeException |
[入力データ]がテーブルモデル型ではありません。 |
[入力データ]がテーブルモデル型かどうかを確認してください。 |
InvalidPropertyConfigurationException <プロパティ名>に値が指定されていません。 |
[<プロパティ名>]に値が指定されていません。 |
[<プロパティ名>]を指定してください。 |
InvalidPropertyConfigurationException <プロパティ名1>の[<行番号>]行目の[<プロパティ名2>]に値が指定されていません。 |
[<プロパティ名2>]に値が指定されていません。 |
[<プロパティ名2>]を指定してください。 |
InvalidPropertyConfigurationException <プロパティ名>の[<行番号>]行目に指定された値が重複しています。 |
[<プロパティ名>]に指定した値が重複しています。 |
[<プロパティ名>]に指定した値が適切かどうかを確認してください。 |
ConversionFailedException 列の値を集計対象として処理できません。 |
入力データの内容に、[集計対象設定]に指定したとおりに処理できない値が含まれています。 |
入力データが[集計対象設定]に指定した内容に適合するかどうか、またはnullや空文字が含まれているかどうかを確認してください。 |