Avro データをR で分析

詳細情報をご希望ですか?

無償トライアル:

ダウンロードへ

製品の詳細情報へ:

Avro ODBC Driver

Avro ODBC Driver は、ODBC 接続をサポートする任意のアプリケーションからAvro のリアルタイムなデータに直接接続できるパワフルなツールです。

標準ODBC Driver インターフェースを使い、データベース感覚でAvro データにアクセスして読み込みができます。



データビジュアライゼーション、ハイパフォーマンスな統計関数を使ってAvro をMicrosoft R Open で分析。



Pure R スクリプトおよび 標準SQL を使ってAvro にアクセス。CData ODBC Driver for Avro とRODBC package を使って、R でリモートAvro を利用できます。CData Driver を使うことで、オープンソースでポピュラーなR 言語のデータにアクセスできます。この記事では、ドライバーを使ってAvro にSQL クエリを実行する方法、およびR でAvro をビジュアライズする方法について説明します。

R をインストール

マルチスレッドのMicrosoft R Open を実行すること、またはBLAS/LAPACK ライブラリにリンクされたオープンR を実行することによって、マルチスレッドおよびマネージドコードからドライバーのパフォーマンスにマッチできます。ここでは、Microsoft R Open 3.2.3 を使用します。CRAN レポジトリのJan. 1, 2016 snapshot からパッケージをインストールするために事前設定されています。このsnapshot は再現性を保証します。

Avro ODBC Data Source としてAvro に連携

接続プロパティの指定がまだの場合は、まずODBC DSN (データソース名)で接続設定を行います。これはドライバーのインストール時に自動的に立ち上がります。Microsoft ODBC データソースアドミニストレーターを使ってODBC DSN を作成および設定できます。

Connect to your local Avro file(s) by setting the URI connection property to the location of the Avro file.

RODBC パッケージをロード

ドライバーを使うにはRODBC パッケージをダウンロードします。RStudio で[Tools]>[Install Packages]をクリックし、RODBC を[Packages]ボックスに入力します。

RODBC パッケージをインストールしたら、次のコードを入力してパッケージをロードします。

library(RODBC)

ODBC データソースとしてAvro データに連携

次のコードを使ってR のDSN に接続できます:

conn <- odbcConnect("CData Avro Source")

スキーマ検出

ドライバーはAvro API をリレーショナルデータベース、ビュー、ストアドプロシージャとしてモデル化します。次のコードを使ってテーブルリストを検出します。

sqlTables(conn)

SQL クエリの実行

sqlQuery 関数を使ってAvro API がサポートするすべてのSQL クエリを実行します。

sampletable_1 <- sqlQuery(conn, "SELECT Id, Column1 FROM SampleTable_1 WHERE Column2 = 'value_2'", believeNRows=FALSE, rows_at_time=1)

次のコマンドを使って、結果を[data viewer]ウィンドウで見ることができます。

View(sampletable_1)

Avro データをプロット

これで、CRAN レポジトリで利用可能なあらゆるデータビジュアライゼーションパッケージを使ってAvro を分析できます。ビルトインのbar plot 関数を使って簡単なバーを作成できます:

par(las=2,ps=10,mar=c(5,15,4,2)) barplot(sampletable_1$Column1, main="Avro SampleTable_1", names.arg = sampletable_1$Id, horiz=TRUE)