Clover ETL からAzure Data Catalog データに連携

CData JDBC Driver for AzureDataCatalog は、CloverETL からAzure Data Catalog へのクエリ 処理を実現します。本記事では、CloverETL でJDBC Driver を使い、Azure Data Catalog をシンプルなCSV ファイルに変換します。

JDBC Data Source でAzure Data Catalog に接続

1. Azure Data Catalog データへの連携を作成します。CloverETL の新しいgraph で、Outline ペインのConnections ノードを右クリックして、Create Connection をクリックします。Database Connection ウィザードが表示されます。
2. ＋アイコンをクリックして、.jar ファイルをロードします。インストールディレクトリのlib フォルダの cdata.jdbc.azuredatacatalog.jar ファイルを選択します。
3. JDBC URL を入力します。一般的な接続文字列は： jdbc:azuredatacatalog:

   You can optionally set the following to read the different catalog data returned from Azure Data Catalog.

   CatalogName: Set this to the CatalogName associated with your Azure Data Catalog. To get your Catalog name, navigate to your Azure Portal home page > Data Catalog > Catalog Name

   Connect Using OAuth Authentication

   You must use OAuth to authenticate with Azure Data Catalog. OAuth requires the authenticating user to interact with Azure Data Catalog using the browser. For more information, refer to the OAuth section in the help documentation.

DBInputTable コンポーネントで、Azure Data Catalog データをクエリ

1. DBInputTable をReaders セクションからドラッグし、ジョブフローに置きます。ダブルクリックして、設定エディタを開きます。
2. DB コネクションプロパティで、Azure Data Catalog JDBC をドロップダウンから選択します。
3. SQL クエリを入力します。例： SELECT * FROM Tables

UniversalDataWriter でQuery のOutput を記述

1. Writer セクションからUniversalDataWriter をドラッグして、ジョブフローに置きます。
2. UniversalDataWriter をダブルクリックして、設定エディタを開き、ファイルURL を足します。
3. DBInputTable をダブルクリックして、Extract Metadata をクリックします。
4. DBInputTable のOutput ポートをUniversalDataWriter に接続します。
5. UniversalDataWriter のSelect Metadata メニューでTables テーブルを選択します。（UniversalDataWriter のInput ポートを右クリックしてメニューを開くことも可能です。）
6. Run をクリックして、ファイルの書き込みを実行します。