Azure Analysis Services を使ってKafka のデータをモデル化

CData Connect Server を使ってAzure Analysis Services からKafka に接続し、リアルタイムKafka のデータをインポートします。

古川えりか
コンテンツスペシャリスト
最終更新日：2022-10-31

こんにちは！ドライバー周りのヘルプドキュメントを担当している古川です。

Azure Analysis Services（AAS）は、エンタープライズレベルのデータモデルをクラウド上で提供する、フルマネージドのPlatform as a Service（PaaS）です。 CData Connect Server と連携すると、AAS はアプリケーションにKafka のデータへのクラウドベースのアクセスを即座に追加できます。この記事では、Connect Server を使ってKafka に接続し、AAS の拡張機能を有効にしたVisual Studio でKafka のデータをインポートする方法を紹介します。

CData Connect Server は、Kafka にクラウドベースのインターフェースを提供し、ネイティブにサポートされているデータベースにデータを複製することなくAzure Analysis Services でのKafka のデータのモデル化を実現します。ビジネスレポートやクライアントアプリケーション用にエンタープライズレベルのセマンティックデータモデルを構築すると、Azure Analysis Services はデータを収集するためのSQL クエリを生成します。さらにCData Connect Server は、最適化されたデータ処理により、サポートされているすべてのSQL 操作（フィルタ、JOIN など）をKafka に直接プッシュし、リクエストされたKafka のデータをサーバー側の処理を利用して高速で返します。

ホスティングについて

AAS からCData Connect Server に接続するには、利用するConnect Server インスタンスをネットワーク経由での接続が可能なサーバーにホスティングして、URL での接続を設定する必要があります。CData Connect がローカルでホスティングされており、localhost アドレス（localhost:8080 など）またはローカルネットワークのIP アドレス（192.168.1.x など）からしか接続できない場合、AAS はCData Connect Server に接続することができません。

クラウドホスティングでの利用をご希望の方は、AWS Marketplace やGCP Marketplace で設定済みのインスタンスを提供しています。

Kafka のデータの仮想データベースを作成する

CData Connect Server は、シンプルなポイントアンドクリックインターフェースを使用してデータソースに接続し、データを取得します。まずは、右側のサイドバーのリンクからConnect Server をインストールしてください。

Connect Server にログインし、「CONNECTIONS」をクリックします。
一覧から「Kafka」を選択します。
Kafka に接続するために必要な認証プロパティを入力します。
Apache Kafka 接続プロパティの取得・設定方法

.NET ベースのエディションは、Confluent.Kafka およびlibrdkafka ライブラリに依存して機能します。これらのアセンブリはインストーラーにバンドルされ、自動的に本製品と一緒にインストールされます。別のインストール方法を利用する場合は、NuGet から依存関係のあるConfluent.Kafka 2.6.0 をインストールしてください。
Apache Kafka サーバーのアドレスを指定するには、BootstrapServers パラメータを使用します。
デフォルトでは、本製品はデータソースとPLAINTEXT で通信し、これはすべてのデータが暗号化なしで送信されることを意味します。通信を暗号化するには：
1. UseSSL をtrue に設定し、本製品がSSL 暗号化を使用するように構成します。
2. SSLServerCert およびSSLServerCertType を設定して、サーバー証明書をロードします。
Apache Kafka への認証
Apache Kafka データソースは、次の認証メソッドをサポートしています：
- Anonymous
- Plain
- SCRAM ログインモジュール
- SSL クライアント証明書
- Kerberos
Anonymous
Apache Kafka の特定のオンプレミスデプロイメントでは、認証接続プロパティを設定することなくApache Kafka に接続できます。こうした接続はanonymous（匿名）と呼ばれます。
匿名認証を行うには、このプロパティを設定します。
- AuthScheme：None。
その他の認証方法については、ヘルプドキュメントを参照してください。
「 Test Connection」をクリックします。
「Permission」->「 Add」とクリックし、適切な権限を持つ新しいユーザー(または既存のユーザー) を追加します。

仮想データベースが作成されたら、Azure Analysis Services を含むお好みのクライアントからKafka に接続できるようになります。

AAS を使ってVisual Studio からKafka に接続

以下のステップでは、Azure Analysis Services からCData Connect Server に接続して新しいKafka のデータソースを作成する方法を説明します。続けるには、Microsoft Analysis Services Project Extension のインストールが必要です。

Visual Studio で新しいプロジェクトを作成します。「Analysis Services Tabular Project」を選択します。

Configure your new project ダイアログで、Project name フィールドにプロジェクト名を入力します。残りの項目も入力します。

Create をクリックします。Tabular model designer ダイアログボックスが開きます。「Workspace server」を選択し、Azure Analysis Services サーバーのアドレス（例：asazure://eastus.azure.windows.net/myAzureServer）を入力します。「Test Connection」をクリックし、サーバーにサインインします。

「OK」をクリックしてプロジェクトを作成します。Visual Studio ウィンドウは、以下のスクリーンショットのようになります。

Visual Studio のTabular model Explorer で、「Data Sources」を右クリックして「Import From Data Source」を選択します。

Table Import Wizard で、SQL Server データベースを選択して「Connect」をクリックします。Server フィールドに、Connect Server のURL とポートをカンマで区切って入力します（例：CONNECT_SERVER_URL,1433）。
「SQL Server Authentication」をクリックして、次の情報を入力します。
- User name：CData Connect Server のユーザー名を入力します。ユーザー名はCData Connect Server のインターフェースの右上に表示されています（例：[email protected]）。
- Password：Connect Server ユーザーのパスワード。
「Test Connection」をクリックします。接続テストに成功したら、Database name リストから目的のリストを選択し、「Next」をクリックします。