Amazon QuickSight でKafka データからインタラクティブなダッシュボードを作成する

Amazon QuickSight ではクラウド上でインタラクティブなダッシュボードを作成できます。CData Connect Cloud と組み合わせると、ビジュアライゼーションやダッシュボード用にKafka データにクラウドベースでアクセスできます。この記事では、Connect Cloud でKafka に接続し、Amazon QuickSight でKafka データにアクセスしダッシュボードを構築する方法を説明します。

CData Connect Cloud は、Kafka にピュアクラウドベースインターフェースを提供し、Amazon QuickSight でKafka データのビジュアライゼーションを実現します。Amazon QuickSight SPICE（Super-fast, Parallel, In-memory Calculation Engine（超高速でパラレル、インメモリの計算エンジン））をインポートすることでAmazon エコシステムのパワフルなデータ処理能力を活用しレスポンシブなダッシュボードを構築できます。また、SPICE に保存されたデータの更新をスケジュールする機能により、ダッシュボードの最新状態を管理することができます。

Connect Cloud からKafka に接続する

1. Connect Cloud にログインし、 Add Connection をクリックします。
2. Add Connection パネルから「Kafka」を選択します。
3. 必要な認証プロパティを入力し、Kafka に接続します。

   BootstrapServers およびTopic プロパティを設定して、Apache Kafka サーバーのアドレスと、対話するトピックを指定します。

   認可メカニズム

   • SASL Plain：User およびPassword プロパティを指定する必要があります。AuthScheme は'Plain' に設定します。
   • SASL SSL：User およびPassword プロパティを指定する必要があります。AuthScheme は'Scram' に、UseSSL はtrue に設定します。
   • SSL：SSLCert およびSSLCertPassword プロパティを指定する必要があります。UseSSL はtrue に設定します。
   • Kerberos：User およびPassword プロパティを指定する必要があります。AuthScheme は'Kerberos' に設定します。

   サーバー証明書を信頼する必要がある場合があります。そのような場合は、必要に応じてTrustStorePath およびTrustStorePassword を指定してください。

4. Create & Test をクリックします。
5. Edit Kafka Connection ページのPermissions タブに移動し、ユーザーベースのアクセス許可を更新します。

パーソナルアクセストークンの追加

OAuth 認証をサポートしていないサービス、アプリケーション、プラットフォーム、またはフレームワークから接続する場合は、認証に使用するパーソナルアクセストークン（PAT）を作成できます。きめ細かなアクセス管理を行うために、サービスごとに個別のPAT を作成するのがベストプラクティスです。

1. Connect Cloud アプリの右上にあるユーザー名をクリックし、User Profile をクリックします。
2. User Profile ページでPersonal Access Token セクションにスクロールし、 Create PAT をクリックします。
3. PAT の名前を入力して Create をクリックします。
4. パーソナルアクセストークンは作成時にしか表示されないため、必ずコピーして安全に保存してください。

コネクションが構成されたら、Amazon QuickSight からKafka に接続できるようになります。

Kafka データをSPICE にインポートしてインタラクティブなダッシュボードを作成する

以下のステップでは、Connect Cloud のKafka 接続をベースにした新しいデータセットの作成、データセットのSPICE へのインポート、およびデータからの簡単なビジュアライゼーションを構築する方法を説明します。

1. Amazon QuickSight にログインし「データセット」をクリックします。
2. 「新しいデータセット」をクリックし、データソースとしてSQL Server を選択しConnect Cloud のインスタンスへの接続を構成します。完了したら「データソースを作成」をクリックします。
3. ビジュアライズ化したいテーブルを選択するか、データのカスタムSQL クエリを発行します。
4. 「データの編集 / プレビュー」をクリックしデータセットをカスタマイズします。
5. 「迅速な分析のために SPICE へインポート」を選択し「視覚化する」をクリックします。
6. ビジュアライズしたいフィールドとタイプを選択します。

SPICE データセットの更新をスケジュールする

QuickSight のユーザーはSPICE にインポートしたデータセットの更新をスケジュールし、分析されるデータが最新で更新されたものだけであることを確認できます。

1. QuickSight のホームページへ移動します。
2. 「データの管理」をクリックします。
3. 更新したいデータセットを選択します。
4. 「更新をスケジュール」をクリックします。
5. 「作成」をクリックし、更新スケジュール（タイムゾーン、繰り返しの頻度、開始日）を設定し、「作成」をクリックします。

クラウドアプリケーションからKafka データへのSQL アクセス

これで、Amazon QuickSigh ダッシュボードからKafka へ直接クラウドベースで接続できます。新しいビジュアライゼーションを作成したり、インタラクティブなダッシュボードを作成したりすることができます。Amazon QuickSight のようなクラウドアプリケーションで、100 を超えるSaaS、Big Data、NoSQL ソースのデータにライブアクセスする方法の詳細については、Connect Cloud ページを参照してください。