XML Framework

XML Frameworkとは

HULFT Squareでは、処理コンポーネント間でのデータの受け渡しをする際には、必ずこのXML Frameworkを介して処理を行います。そのためXML Frameworkは、HULFT Squareのデータハンドリングの心臓部にあたるといえます。

XML Frameworkの役割

XML Frameworkを経由してデータをやり取りすることにより、各処理コンポーネントはお互いにデータを透過的に扱えるようになります。

XML Frameworkには大きく2つの役割があります。

• データの保存形式の差異を吸収する

  HULFT Squareでは、処理コンポーネントごとに大容量データを扱うようにするかどうかの設定が可能です。大容量データ処理を有効にしなかった場合と有効にした場合とでは、結果データの内部的なデータ保存形式が異なります。

  大容量データ処理を有効にしなかった場合には、結果データはメモリに保存され、大容量データ処理を有効にした場合には結果データはファイルに保存されます。

  結果データの保存先がメモリであってもファイルであっても、XML Frameworkが保存形式の差異を吸収するため、処理コンポーネントからは単一のデータ形式に見えます。このため、処理コンポーネントの実装は保存形式に依存しません。

  = 参照 =

  大容量データについては、「大容量データの対応」を参照してください。

• データモデルの差異を吸収する

  内部データモデルには、構造を柔軟に設計できるXML型と、高速処理や大容量データ処理に適応したテーブルモデル型があります。

  内部的には2つのデータモデルが存在するものの、XML Frameworkがデータモデルの差異を吸収するため、処理コンポーネントからは単一のデータモデルに見えます。

  = 参照 =

  XML型とテーブルモデル型については、「データモデル 」を参照してください。

  XML Frameworkを経由することにより、処理コンポーネント同士はお互いに緩やかな結合となり、ある処理コンポーネントの設定や状態の変更が、ほかの処理コンポーネントに影響をおよぼさなくなります。

  たとえば、データベースからCSVにデータを書き込む処理を作成した場合、当初はデータ量が少なく大容量データ処理を有効化せずに実行していたスクリプトが、要求の変更により大容量データの読み取りをサポートしなければならない状況になったとしても、データベースコネクター読み取り処理の大容量データの設定を有効にするだけです。 書き込み対象のCSVコネクターの設定を変更する必要はありません。また、CSVに書き出すのではなく、XML文書に書き出すように変更があった場合でも、CSVコネクターをXMLコネクターに変更するだけです。

  

データモデル

XML Frameworkで使用されているデータモデルは、テーブルモデル型とXML型があります。

テーブルモデル型

テーブルモデル型とは、データを高速に処理(読み取り、変換、および書き込み)するためのデータモデルです。

テーブルモデル型は、CSV形式のデータやデータベースのレコード/カラム情報など、二次元配列として表現できるデータモデルを扱う際に適しています。

テーブルモデル型は、実際のデータ(データベースの場合にはデータベースから抽出したデータ)以外の情報はほとんど生成されないため、非常にコンパクトなデータモデルとなっています。

また、内部では、配列にアクセスするのと同様のデータアクセス速度となるため、非常に高速に処理を行うことができます。

<table>
  <row>
    <column></column>
    <column></column>
       :
  </row>
  <row>
    <column></column>
    <column></column>
       :
  </row>
    :
</table>

XML型

XML型とはデータを中間データとしてXML文字列で保持するデータモデルです。

XML型は構造を自由に設計できるため、処理によって構造が異なる場合に適しています。