DataMagic 技術コラム Vol.20

データマート（目的別データベース）とはデータウェアハウスの中から特定の目的に合わせたデータを抽出し、利用部門ごとに利用目的に合ったデータのみを所持するものです。例えば、保険業界やクレジットカード業界では、契約照会システムを構築する際にインプットデータを契約管理システムから連携するケースが一般的です。ただ、契約照会システムではインプットデータ内の個人情報にあたる電話番号や、住所部分についてマスキング処理を行い、契約照会システムの利用者の開示しない形をとられるケースがあります。また、システム構築のテストフェーズで本番データにできる限り近いデータを用意する目的で契約データを利用するが個人情報部分については、マスキングしテスト実施することがほとんどです。このようなデータマスキングを行う場合、多くは「住所の何桁目から何桁目まではマスクする」といったルールはあるがマスキング方法については人手を介すケースもあり、システム化・標準化をしにくいとの課題が存在します。

DataMagicを用いることにより、データマート構築時に必要となるデータクレンジングに合わせて対象データの個人情報部分に対してマスキング指定文字に自動的に変換することが可能となり、データマスキングの工数削減を実現します。

なお、本TIPSを利用するには、DataMagicがコンピュータにインストールされていることが条件となります。DataMagicの入手先やインストール方法などについては、別稿の「DataMagicをインストールする」を参照してください。

まずは、変換元データとなるCSVデータを用意します。データが用意出来たら、DataMagicが導入されているPCの下記のフォルダに保存します。
C:\work\SAMPLE20\（“in”というファイル名で保存）

下記のスクリプトファイルをダウンロードして、DataMagicがインストールされているフォルダに保存します。
C:\work\SAMPLE20\（“sample20.igen”というファイル名で保存）

DataMagic の管理画面を起動し、ダウンロードしたスクリプトファイルをDataMagicに取り込みます。取り込みはスタート画面の[ツール]にある[管理情報インポート]アイコンをクリックします。管理情報インポート画面においてダウンロードしたファイルを指定し、インポートボタンをクリックします。すると、データ加工情報一覧画面にSAMPLE20というIDが登録されます。

手順2において登録したSAMPLE20というデータ加工情報IDをダブルクリックし、入力設定および出力設定のファイル名が正しく設定されていることを確認します。画面から、SAMPLE20のデータ加工情報IDを開き、画面上部にある「実行」ボタンから行います。

手順3において実行が完了すると、出力設定において指定されたC:\work\SAMPLE20\に“out”というファイルが出来ているのでメモ帳等のエディタで確認して下さい。

今回のデータマスキングではREPLACE_REGという文字列置き換え関数を利用し実現しております。この関数は文字の検索に正規表現を利用でき、非常に細かな置換条件を設定できるため、多種多様な文字列の検索及び置換の実現を可能とします。データマスキングのみならず幅広くご利用いただくことができます。

ぜひ、DataMagic 評価版をダウンロードして、技術コラムの解説をお試しください。