タグ: BigQuery

記事画像
2024年05月07日

Google Analytics 4 の生データを Amazon Redshift に継続的レプリケーション

by 赤塚誠二

今回はCData が提供しているパイプラインツール「CData Sync」を使用して BigQuery に蓄積されたGA4 の生データを Redshift に自動で継続的にレプリケーションするフローを構築してみたいと思います。

続きを読む

記事画像
2023年09月11日

DWH のデータが多すぎてPower BI で使えない?DirectQuery を活用しましょう!

by 加藤龍彦

Power BI のDirectQuery 機能とCData Power BI コネクタを使って、大規模なGoogle BigQuery データをリアルタイムに分析する方法を紹介します。データインポートのお悩みを解消!

続きを読む

記事画像
2023年08月02日

BigQuery の MERGE ステートメントを CData Sync でサポート!

by 宮本航太

CData Sync V23.2 では同期先コネクタの機能追加も行われ、その一種として BigQuery 上でMerge ステートメントを使った方式のレプリケーションもサポートされました!

続きを読む

記事画像
2023年05月11日

CData Sync のTips 集

by Jonathan Hikita, 加藤龍彦

CData Sync は、Salesforce やkintone などのSaaS やRDB データを各種DB にレプリケーション(複製)できるデータパイプラインツールです。 CData Sync 概要 CData Sync 概要 from CData Software Japan データソースとして対応するSaaS、DB は400種類以上 S…

続きを読む

記事画像
2023年04月19日

Bカートの受注データを Google BigQuery へ定期的に連携する:CData Sync

by 杉本和也

こんにちは。CData Software Japan リードエンジニアの杉本です。 本記事では 分析基盤向けデータ統合の自動化ツールである CDataSync を使って、Bカートの受注データを Google BigQuery に連携し、分析する方法を紹介したいと思います。 Bカート とは? Bカ…

続きを読む

記事画像
2023年02月20日

Amazon S3 の日別フォルダから動的にファイルを取り出してBigQuery にレプリケーションする:CData Sync

by 宮本航太

データパイプラインツールのCData Sync を使って、Amazon S3 に日別に作成されたフォルダに格納されているCSV ファイルの中身を動的に取得し、BigQuery に連携する方法をご紹介します。

続きを読む

記事画像
2023年01月30日

CData Sync dbt変換機能 - Google BigQueryをサポートしました

by 桑島義行

CData Sync 製品では2022/09リリースのV22 から ELT処理の「T(Transform:データ変換)」機能で dbt Core プロジェクトを指定・実行できるようになりました。20223/02リリースの今回の機能強化で本dbt統合機能でサポート可能なデータソースとしてGoogle BigQuery が新たに加わりました。本記事では、CData Sync製品を利用してBigQueryのデータ変換をdbtで行う方法を説明します。

続きを読む

記事画像
2022年11月10日

CData Sync で DB2 for IBM i (AS/400) のデータをGoogle BigQuery に同期する

by 浦邊信太郎

本記事ではCData Sync を使用し、 DB2 for IBM i (AS/400) のデータをGoogle BigQuery に同期する方法を紹介します。

続きを読む

記事画像
2022年09月22日

CData Sync V22 : Google BigQuery 同期先でテーブル定義の変更をサポート

by 浦邊信太郎

CData Sync のV22 でGoogle BigQuery 同期先でテーブル定義の変更がサポートされました。

続きを読む