Exploratory でDatabricks データを連携する方法

CData ODBC Driver for Databricks は、ODBC 経由でリアルタイムDatabricks Data に標準SQL での利用を可能にします。 ここでは、汎用ODBC データプロバイダーとしてDatabricks に接続し、データアナリティクスツールのExploratory (https://exploratory.io/) からDatabricks データを連携利用する手順を説明します。
Exploratory は、多くのRDB やRedshift、BigQuery などのクラウドデータストアに対応していますが、SaaS データを分析したい場合にはCData ODBC Drivers を使うことで、API コーディング不要でデータを活用できます。今回はDatabricks を例に説明します。

Databricks Data に接続するODBC DSN を設定

ODBC Driver for Databricks をダウンロードします。次にマシンにDatabricks data に接続するODBC DSN を設定します。Exploratory からはそのODBC DSN を参照する形になります。ODBC DSN 設定の詳細については、ドキュメントを参照してください。

To connect to a Databricks cluster, set the properties as described below.

Note: The needed values can be found in your Databricks instance by navigating to Clusters, and selecting the desired cluster, and selecting the JDBC/ODBC tab under Advanced Options.

• Server: Set to the Server Hostname of your Databricks cluster.
• HTTPPath: Set to the HTTP Path of your Databricks cluster.
• Token: Set to your personal access token (this value can be obtained by navigating to the User Settings page of your Databricks instance and selecting the Access Tokens tab).

Exploratory 上でDatabricks のデータをセット

• Exploratory で［コネクション］をクリックして新しいコネクションを作成します。
• ［追加］→［ODBC］の順にクリック。
• コネクション追加画面で先ほど設定したDatabricks ODBC のDSN を設定します。
  名前：任意
  タイプ：ODBC
  DSN：上の設定したDSN 名（CData Databricks Sys）
  
• コネクションテストを下の地、［追加］を押して接続を確定させます。

Exploratory でDatabricks データをクエリし、データフレームとして保存

さあ、Exploratory からDatabricks データを扱ってみましょう。

• Exploratory でプロジェクトを［新規作成］します。
• ［データフレーム］の［+］印をクリックし、［データベースデータ］を選択します。
• データベースは［ODBC］をクリック。
• ［コネクション］で先ほど設定したDatabricks のコネクションを選択します。
• RDB ソースの感覚でSELECT クエリでDatabricks データをクエリします。標準SQL でフィルタリング、ソート、JOIN も可能です。
• データセットをデータフレームとして保存します。

Exploratory でのDatabricks データの分析

データフレームになったデータは通常のRDB データソースと同じようにExploratory で利用可能です。

このように、Exploratory から簡単にDatabricks データを接続して利用することができました。ODBC Driver には30日間の無償版がありますので、是非お試しください。