Azure Data Lake Storage JDBC ドライバーを使用したOBIEE でのAzure Data Lake Storage レポート

こんにちは！ウェブ担当の加藤です。マーケ関連のデータ分析や整備もやっています。

CData JDBC Driver for ADLS は、Azure Data Lake Storage へのリアルタイムアクセスをJava ベースのレポートサーバーに統合できる標準のデータベースドライバーです。この記事では、ドライバーをOracle Business Intelligence Enterprise Edition (OBIEE) にデプロイし、変更を反映するAzure Data Lake Storage に関する方法を示します。

JDBC ドライバーをデプロイ

以下のステップに従って、WebLogic のクラスパスにJDBC ドライバーを追加します。

WebLogic 12.2.1 の場合、ドライバーJAR と.lic ファイルをORACLE_HOME\user_projects\domains\MY_DOMAIN\lib のようにDOMAIN_HOME\lib に配置します。これらのファイルは、起動時にサーバーのクラスパスに追加されます。

ドライバーをクラスパスに手動で追加することもできます。これは、以前のバージョンで必要です。setDomainEnv.cmd (Windows) または setDomainEnv.sh (Unix) のPRE_CLASSPATH の前に以下を追加します。このスクリプトは、そのドメインのフォルダーのbin サブフォルダーにあります。例：ORACLE_HOME\user_projects\domains\MY_DOMAIN\bin.

DOMAIN_HOME\bitools\bin でstop コマンドとstart コマンドを実行するなど、すべてのサーバーを再起動します。

JDBC Data Source for ADLS の作成

JDBC ドライバーをデプロイした後、BI Publisher からJDBC データソースを作成できます。

1. BI Publisher にURL http://localhost:9502/analytics でログインし、［Administration］->［Manage BI Publisher］とクリックします。
2. ［JDBC Connection］->［Add Data Source］と進みます。
3. 以下の情報を入力します。
   • Data Source Name:ユーザーが接続を作成する名前をレポートに入力します。
   • Driver Type:SELECTOther.
   • Database DriverClass:ドライバークラスに cdata.jdbc.adls.ADLSDriver を入力します。
   • Connection String:JDBC URL を入力します。

     Azure DataLakeStorage 接続プロパティの取得・設定方法

     Azure DataLakeStorage Gen 1 への接続

     Gen 1 DataLakeStorage アカウントに接続するには、はじめに以下のプロパティを設定します。

     • Schema：ADLSGen1 を指定。
     • Account：アカウント名に設定。
     • AzureTenant：テナントId に設定。Azure Portal 内のAzure Data Lake プロパティから取得できます。
     • Directory：（オプション）複製したファイルを格納するためのパスを設定。指定しない場合は、ルートディレクトリが使用されます。

     Azure DataLakeStorage Gen 1 への認証

     Gen 1 は、認証方法としてAzure Active Directory OAuth（AzureAD）およびマネージドサービスID（AzureMSI）をサポートしています。認証方法は、ヘルプドキュメントの「Azure DataLakeStorage Gen 1 への認証」セクションを参照してください。

     Azure DataLakeStorage Gen 2 への接続

     Gen 2 DataLakeStorage アカウントに接続するには、はじめに以下のプロパティを設定します。

     • Schema：ADLSGen2 に設定。
     • Account：ストレージアカウント名に設定。
     • FileSystem：このアカウントで使用するファイルシステム名に設定。例えば、Azure Blob コンテナ名など。
     • Directory：（オプション）複製したファイルを格納するためのパスを設定。指定しない場合は、ルートディレクトリが使用されます。

     Azure DataLakeStorage Gen 2 への認証

     Gen 2は、認証方法としてアクセスキー、共有アクセス署名（SAS）、Azure Active Directory OAuth（AzureAD）、マネージドサービスID（AzureMSI）など多様な方法をサポートしています。AzureAD、AzureMSI での認証方法は、ヘルプドキュメントの「Azure DataLakeStorage Gen 2 への認証」セクションを参照してください。

     アクセスキーを使用した認証

     アクセスキーを使用して接続するには、AccessKey プロパティを取得したアクセスキーの値に、AuthScheme を「AccessKey」に設定します。

     Azure ポータルからADLS Gen2 ストレージアカウントのアクセスキーを取得できます。

     1. Azure ポータルのADLS Gen2 ストレージアカウントにアクセスします。
     2. 設定で「アクセスキー」を選択します。
     3. 利用可能なアクセスキーの1つの値を「AccessKey」接続プロパティにコピーします。

     共有アクセス署名（SAS）

     共有アクセス署名を使用して接続するには、SharedAccessSignature プロパティを接続先リソースの有効な署名に設定して、AuthScheme を「SAS」に設定します。 共有アクセス署名は、Azure Storage Explorer などのツールで生成できます。

     ビルトイン接続文字列デザイナ

     JDBC URL の構成については、Azure Data Lake Storage JDBC Driver に組み込まれている接続文字列デザイナを使用してください。JAR ファイルのダブルクリック、またはコマンドラインからJAR ファイルを実行します。

     java -jar cdata.jdbc.adls.jar

     接続プロパティを入力し、接続文字列をクリップボードにコピーします。

     JDBC URL を構成する際に、Max Rows プロパティを定めることも可能です。これによって戻される行数を制限するため、可視化・レポートのデザイン設計時のパフォーマンスを向上させるのに役立ちます。

     以下は一般的なJDBC URL です。

     jdbc:adls:Schema=ADLSGen2;Account=myAccount;FileSystem=myFileSystem;AccessKey=myAccessKey;InitiateOAuth=GETANDREFRESH
   • Username:ユーザー名。
   • Password:パスワード。
4. ［Security］セクションで、許可されているユーザーロールを選択します。

リアルタイムのAzure Data Lake Storage レポートを作成

リアルタイムのAzure Data Lake Storage に基づいてレポートと分析を作成できるようになります。以下のステップに従って、標準のレポートウィザードを使用してAzure Data Lake Storage への変更を反映するインタラクティブなレポートを作成します。

1. グローバルヘッダーで、［New］->［Data Model］をクリックします。
2. Diagram タブでメニューからSQL クエリを選択します。
3. クエリの名前を入力し、［Data Source］メニューで、作成したAzure Data Lake Storage JDBC データを選択します。
4. 標準のSQL を選択し、以下のようなクエリを入力します。 SELECT FullPath, Permission FROM Resources WHERE Type = 'FILE'
5. ［View Data］をクリックし、レポートの作成に使用するサンプルデータを生成します。
6. サンプルデータに含める行数を選択し、［View］をクリックして［Save As Sample Data］をクリックします。
7. ［Create Report］->［Use Data Model］とクリックします。
8. ［Guide Me］を選択し、［Select Layout］ページで含めるレポートオブジェクトを選択します。この例では、［Chart］と［Table］を選択します。
9. Permission のような数値列をy 軸の［Drop Value Here］ボックスにドロップします。FullPath のようなディメンション列をx 軸の［Drop Label Here］ボックスにドロップします。
10. ［Refresh］をクリックしてAzure Data Lake Storage への変更を取得します。