Domo Workbench のAzure Data Lake Storage からデータセットを作成し、Domo からAzure Data Lake Storage データ に連携するビジュアライゼーションを作成

こんにちは！ドライバー周りのヘルプドキュメントを担当している古川です。

Domo は、組織全体でデータを管理、分析、また共有し、組織が戦略的な機会を逃さず判断し対応することを実現するデータ活用プラットフォームです。Domo Workbench は、社内データをDomo にアップロードするための安全なクライアントサイドソリューションを提供します。CData ODBC Driver for ADLS は、Domo Workbench をAzure Data Lake Storage データ に連携します。Workbench で標準のSQL クエリを使用してAzure Data Lake Storage データ からデータセットを構築し、Domo サービスでAzure Data Lake Storage データ のリアルタイムビジュアライゼーションを作成できます。

CData ODBC ドライバーは、最適化されたデータ処理がドライバーに組み込まれているため、Domo のライブAzure Data Lake Storage データとの連携に高いパフォーマンスを提供します。Domo からAzure Data Lake Storageに複雑なSQL クエリを発行すると、ドライバーはフィルタや集計などのサポートされているSQL 操作を直接Azure Data Lake Storageにプッシュし、埋め込みSQL エンジンを利用してサポートされていない操作（SQL 関数やJOIN 操作）を処理します。 組み込みの動的メタデータクエリを使用すると、ネイティブのDomo データ型を使用してAzure Data Lake Storage データを視覚化および分析できます。

CData ODBC ドライバとは？

CData ODBC ドライバは、以下のような特徴を持ったリアルタイムデータ連携ソリューションです。

1. Azure Data Lake Storage をはじめとする、CRM、MA、会計ツールなど多様なカテゴリの270種類以上のSaaS / オンプレミスデータソースに対応
2. 多様なアプリケーション、ツールにAzure Data Lake Storage データを連携
3. ノーコードでの手軽な接続設定
4. 標準 SQL での柔軟なデータ読み込み・書き込み

CData ODBC ドライバでは、1.データソースとしてAzure Data Lake Storage の接続を設定、2.Domo 側でODBC Driver との接続を設定、という2つのステップだけでデータソースに接続できます。以下に具体的な設定手順を説明します。

CData ODBC ドライバのインストールとAzure Data Lake Storage への接続設定

まずは、本記事右側のサイドバーからADLS ODBC Driver の無償トライアルをダウンロード・インストールしてください。30日間無償で、製品版の全機能が使用できます。

ODBC DSN (data source name) にて接続プロパティをまだ指定していない場合、指定します。ODBC DSN を作成し構成するために、Microsoft ODBC Data Source Administrator を利用できます。

Azure DataLakeStorage 接続プロパティの取得・設定方法

Azure DataLakeStorage Gen 1 への接続

Gen 1 DataLakeStorage アカウントに接続するには、はじめに以下のプロパティを設定します。

• Schema：ADLSGen1 を指定。
• Account：アカウント名に設定。
• AzureTenant：テナントId に設定。Azure Portal 内のAzure Data Lake プロパティから取得できます。
• Directory：（オプション）複製したファイルを格納するためのパスを設定。指定しない場合は、ルートディレクトリが使用されます。

Azure DataLakeStorage Gen 1 への認証

Gen 1 は、認証方法としてAzure Active Directory OAuth（AzureAD）およびマネージドサービスID（AzureMSI）をサポートしています。認証方法は、ヘルプドキュメントの「Azure DataLakeStorage Gen 1 への認証」セクションを参照してください。

Azure DataLakeStorage Gen 2 への接続

Gen 2 DataLakeStorage アカウントに接続するには、はじめに以下のプロパティを設定します。

• Schema：ADLSGen2 に設定。
• Account：ストレージアカウント名に設定。
• FileSystem：このアカウントで使用するファイルシステム名に設定。例えば、Azure Blob コンテナ名など。
• Directory：（オプション）複製したファイルを格納するためのパスを設定。指定しない場合は、ルートディレクトリが使用されます。

Azure DataLakeStorage Gen 2 への認証

Gen 2は、認証方法としてアクセスキー、共有アクセス署名（SAS）、Azure Active Directory OAuth（AzureAD）、マネージドサービスID（AzureMSI）など多様な方法をサポートしています。AzureAD、AzureMSI での認証方法は、ヘルプドキュメントの「Azure DataLakeStorage Gen 2 への認証」セクションを参照してください。

アクセスキーを使用した認証

アクセスキーを使用して接続するには、AccessKey プロパティを取得したアクセスキーの値に、AuthScheme を「AccessKey」に設定します。

Azure ポータルからADLS Gen2 ストレージアカウントのアクセスキーを取得できます。

1. Azure ポータルのADLS Gen2 ストレージアカウントにアクセスします。
2. 設定で「アクセスキー」を選択します。
3. 利用可能なアクセスキーの1つの値を「AccessKey」接続プロパティにコピーします。

共有アクセス署名（SAS）

共有アクセス署名を使用して接続するには、SharedAccessSignature プロパティを接続先リソースの有効な署名に設定して、AuthScheme を「SAS」に設定します。 共有アクセス署名は、Azure Storage Explorer などのツールで生成できます。

DSN を構成する際、Max Rows の接続プロパティ設定が必要かもしれません。これにより返される行数を制限します。レポートやビジュアライゼーション（可視化）を設計する際のパフォーマンス向上に、とくに役立ちます。

DSN を作成したあと、Azure Data Lake Storage DSN を用いDomo Workbench でAzure Data Lake Storage のデータセットを作成し、そのデータセットに基づきDomo サービスでビジュアライゼーションを構築する必要があります。

Azure Data Lake Storage データ のデータセットを作成

下記の手順に沿って、CData ODBC Driver for ADLS を用いて Domo Workbench のAzure Data Lake Storage のテーブルに基づいたデータセットを構築できます。

1. Domo Workbenchを開きます。まだDomo サービスサーバーをWorkbench に追加していない場合、追加します。Accounts のサブメニューより、Add New をクリック。サーバーアドレス（domain.domo.com など）を入力し、認証ウィザードからクリックします。
2. DataSet Jobs サブメニューから、Add New をクリックします。
3. データセットジョブに名前をつけ（ODBC Azure Data Lake Storage Resourcesなど）、変換方法としてODBC Connection Provider を選択、ウィザードからクリックします。
4. 新規に作成されたDataSet Job で、Source へ移動、設定を構成するためクリックします。
5. Connection Type にSystem DSN を選択します。
6. System DSN に以前構成したDSN （CData ADLS Sys）を選択します。
7. 構成を確定するためクリックします。
8. 設定にて、Query をSQL クエリに設定します。 SELECT * FROM Resources 備考: ODBC ドライバーを利用しAzure Data Lake Storage データ データへ接続することで、データを取得するためにシンプルなSQL の知識だけで、Azure Data Lake Storage 特有のAPI またはプロトコルを知る必要性がなくなります。
9. Preview をクリックします。
10. 生成されたスキーマからデータを確認し、変更を加えます。それから、保存しデータセットのジョブを実行します。

データセットのジョブを実行すると、データセットはDomo サービスからアクセス可能になります。これにより、Azure Data Lake Storage データ を基にした可視化、レポート作成、そしてさらにさまざまなことができるようになります。

データビジュアライゼーションを作成

DataSet Job を保存しDomo Workbench 上で実行すると、Domo サービス上で Azure Data Lake Storage データ の可視化準備が完了です。

1. Data Center へ移動します。
2. データウェアハウスにて、ODBC データソースを選択し、新しいデータセットへドリルダウンします。
3. データセットを選択し、Create a visualization を選びます。
4. 新しいカードで、下記を実行します。
   • Dimension をX Value へドラッグ。
   • Measure をY Value へドラッグ。
   • Visualization を選択。

おわりに

このようにCData ODBC ドライバと併用することで、270を超えるSaaS、NoSQL データをコーディングなしで扱うことができます。30日の無償評価版が利用できますので、ぜひ自社で使っているクラウドサービスやNoSQL と合わせて活用してみてください。

CData ODBC ドライバは日本のユーザー向けに、UI の日本語化、ドキュメントの日本語化、日本語でのテクニカルサポートを提供しています。