DataSyncer for kintone を使ってCData Sync の出力結果をkintone に書き込む

by 杉本和也 | 2023年01月05日

こんにちは。CData Software Japan リードエンジニアの杉本です。

CData ではBigQuery やSnowflake、PostgreSQL などのRDB やDWH にデータをレプリケーションするためのデータパイプラインツール「CData Sync」を提供しています。

例えば以下のような事例のように活用されています。

https://www.cdata.com/jp/case-study/topcon/

しかしながら、CData Sync はあくまでRDBやDWHにデータを渡すことを主眼としているためSalesforce やkintone に対してデータを書き込むことはできません。

とはいえ、最近レプリケーションしたデータの売上や問い合わせなどの分析結果をもとに顧客ランクなどを計算して、それをkintone に下記戻したいといったニーズもよく伺います。

そこで今回は「DataSyncer for kintone」というサービスとCData Sync を組み合わせて、CData Sync の出力結果をkintone に書き込む方法を紹介したいと思います。

DataSyncer for kintone とは？

DataSyncer for kintone はクラフテクスが提供するCSVファイルのkintone 連携に特化したアプリケーションです。

オンプレミス環境に配置して実行することで所定のフォルダを監視し、そこに配置されたCSVファイルを自動的に対象のkintone アプリに取り込むことができるようになっています。

https://datasyncer.craftex.jp/

対象のCSV ファイルの取り込みアプローチもかなり柔軟にできるようになっており、管理用のkintone アプリでマッピングなどが調整できます。

シナリオ

CData Sync はデータのレプリケーション先の一つとして、ローカルのCSVファイル出力機能を備えています。今回はこのCSV ファイル出力機能とDataSyncer for kintone を組み合わせて、kintone へのデータ書き込みを実現します。

対象のデータはPostgreSQL としました。以下のような顧客情報をCSVとして出力し、DataSyncer for kintone 経由でkintone アプリに登録します。

今回はPostgreSQL で提供されているサンプルデータベースですが、もちろん各種クラウドサービスからレプリケーションした結果を集計などの処理をして、CSV として吐き出すような構成も可能です。

DataSyncer for kintone 実行ファイル、監視フォルダの準備

それでは実際に準備を進めていきましょう。

まずDataSyncer for kintone の実行ファイルを任意のフォルダに配置します。最初の実行時にアプリケーション登録が必要なので、必要な情報を採取してクラフテクスのサポートに連絡しておきます。

次に監視対象となるフォルダを作成しておきます。監視対象の「C:\datasyncer_path\spool」と結果を保存する「C:\datasyncer_path\archive」フォルダを作成しました。

CSV登録設定を作成

次に「DataSyncer for kintone」のCSV登録設定を専用のkintone ページにて行います。

予め対象のkintone アプリからAPP IDとAPI トークンを取得しておき設定します。合わせてCSV 投入パスとCSV アーカイブパスに先程作成したフォルダパスを指定しておきます。

文字コードは「utf-8」を指定します。

次にCSVファイルとのマッピングを作成します。今回は以下のような顧客リストを対象にデータを登録します。

データベースから出力される項目をもとに、フィールドコードを指定します。更新用のキーなども独自に指定できるのが良いですね。kintone はデータを更新する際に予めRecordId を特定する必要があるのですが、このあたりをDataSyncer for kintone が良い具合にやってくれるのがとても良いです。

これで準備は完了です。