SSAS でHive データに連携するOLAP Cube を作成

こんにちは！ウェブ担当の加藤です。マーケ関連のデータ分析や整備もやっています。

SQL Server Analysis Services (SSAS) は、意思決定支援やビジネスアナリティックスで使われる解析エンジンです。ビジネスレポートおよび、Power BI やExcel、 Reporting Services レポート、その他のデータ可視化ツールのようなクライアントアプリケーションに、エンタープライズレベルのセマンティックデータを提供します。Hive 用のCData ADO.NET プロバイダーと合わせれば、Hive を使って、より深く速いデータ分析のためのキューブを作成できます。

この記事では、Analysis Services プロジェクトをVisual Studio で作成し、Hive の多次元モデルを構築および配置する方法を説明します。これには、アクセス可能なSSAS インスタンスと、ADO.NET プロバイダーのインストールが必要です。

Hive 用のJDBC データソースの設定

まず、Visual Studio で新しい多元的なAnalysis Service とデータマイニングプロジェクトを作成します。次に、プロジェクト内でHive 用のデータソースを作成します。

1. ［Solution Explorer］ の［Data Source］ を右クリックし、［New Data Source］ を選択します。
2. 既存または新規の接続に基づいて、データソースを作成することを選択し、［New］ をクリックします。
3. ［Connection Manager］ のHive 用CData ADO.NET プロバイダーを選択し、必要な接続プロパティに入力後、［Next］ をクリックします。

   Apache Hive への接続を確立するには以下を指定します。

   • Server：HiveServer2 をホストするサーバーのホスト名またはIP アドレスに設定。
   • Port：HiveServer2 インスタンスへの接続用のポートに設定。
   • TransportMode：Hive サーバーとの通信に使用するトランスポートモード。有効な入力値は、BINARY およびHTTP です。デフォルトではBINARY が選択されます。
   • AuthScheme：使用される認証スキーム。有効な入力値はPLAIN、LDAP、NOSASL、およびKERBEROS です。デフォルトではPLAIN が選択されます。
   • CData 製品においてTLS/SSL を有効化するには、UseSSL をTrue に設定します

   接続を構成する際に、Max Rows プロパティを定めることも可能です。これによって戻される行数を制限するため、可視化・レポートのデザイン設計時のパフォーマンスを向上させるのに役立ちます。

4. インパーソネーションを［Inherit］ に設定し、［Next］ をクリックします。
5. データソースに名称(CData Hive Source) を入力し、［Finish］ をクリックします。

データソースビューの作成

データソースの次に、データソースビューを作成します。

1. ［Solution Explorer］ で［Data Source Views］ を右クリックし、［New Data Source View］ を選択します。
2. 先ほど作成したデータソース(CData Hive Source) を選択し、［Next］ をクリックします。
3. 基になるデータソースのパターンに一致する外部キーを選択し、［Next］ をクリックします。
4. Hive の表を選択、ビューに追加し、［Next］ をクリックします。
5. ビューに名前を付け、［Finish］ をクリックします。

スキームに一致する外部キーに基づいて、基礎的なデータとのリレーションが検出されます。［Data Source View］ をダブルクリックすることで、これらのリレーションを確認・編集することができます。

［Data Source View］ へのセカンダリデータソースの追加はサポートされないことに注意してください。複数のデータソースを利用する場合、SSAS は、すべてのソースがADO.NET プロバイダーでは使用できないOpenRowset 経由のリモートクエリをサポートすることを必要とします。

Hive 用のキューブを作成する

プロジェクトを処理してHive をSSAS に展開するための最後のステップはキューブの作成です。

1. ［Solution Explorer］ の［Cubes］ を右クリックし、［New Cube］ を選択します。
2. ［Use existing tables］ を選択し、［Next］ をクリックします。
3. メジャーグループテーブルに使用するテ－ブルを選択し、［Next］ をクリックします。
4. キューブに含ませたいメジャーを選択し、［Next］ をクリックします。
5. 使用可能なテーブルに基づいて作成するディメンションを選択し、［Next］ をクリックします。
6. すべての選択内容を確認し、［Finish］ をクリックします。

プロジェクトを処理する

データソースと、データソースビュー、キューブを作成すると、SSASにキューブを展開する準備が完了します。ターゲットサーバーとデータベースを構成するために、プロジェクトを右クリックしプロパティを選択します。デプロイメントに移動し、ターゲットセクションでサーバーとデータベースのプロパティを設定します。

ターゲットサーバーとデータベースを構成した後、プロジェクトを右クリックして［Process］ を選択します。このステップの一部として、プロジェクトの構成・デプロイが必要となる場合があります。プロジェクトを構成・デプロイし、［Process Database］ウィザードにある［Run］ をクリックします。

SSAS インスタンスにHive 用のOLAP キューブが作成され、分析、レポート、表示の準備が完了します。Hive 用のCData ADO.NET プロバイダーの30日の無償評価版をダウンロードして、SSAS データをご利用ください。