Ready to get started?

Learn more about the CData ADO.NET Provider for Apache Spark or download a free trial:

Download Now

Powershell からの Apache Spark 統合タスクを自動化

PowerShell から Apache Spark data に簡単に接続する方法をお探しですか? CData ADO.NET Provider for Apache Spark は、PowerShell スクリプトの優位性を使い、シンプルで簡単に使えるADO.NET インターフェース を提供します。PowerShell スクリプトで、ADO.NET オブジェクトを使って簡単にApache Spark data に接続して、同期、自動化、ダウンロードなどが可能!



CData ADO.NET Provider for Apache Spark は、ADO.NET 標準インターフェースへ統合し、PowerShell のような. NET アプリケーションからApache Spark API へのアクセスを可能にします。このプロバイダーは、Apache Spark data の認証および相互作用を簡単にします。このチュートリアルでは、PowerShell から直接SQL クエリを実行するための、いくつかの一般的なADO.NET オブジェクトの使い方を説明します。

クエリの実行

次の3つのステップに従って create、read、update、およびdelete (CRUD) コマンドを PowerShell のApache Spark data に実行:

  1. プロバイダーのアセンブリをロード:

    [Reflection.Assembly]::LoadFile("C:\Program Files\CData\CData ADO.NET Provider for Apache Spark\lib\System.Data.CData.SparkSQL.dll")
  2. Apache Spark data に接続:

    Set the Server, Database, User, and Password connection properties to connect to SparkSQL.

    $constr = "Server=127.0.0.1;" $conn= New-Object System.Data.CData.SparkSQL.SparkSQLConnection($constr) $conn.Open()
  3. SparkSQLDataAdapter のインスタンスを生成してSQL クエリを実行し、結果を出力:

    $sql="SELECT City, Balance from Customers" $da= New-Object System.Data.CData.SparkSQL.SparkSQLDataAdapter($sql, $conn) $dt= New-Object System.Data.DataTable $da.Fill($dt) $dt.Rows | foreach { Write-Host $_.city $_.balance }

Apache Spark Data の更新

$cmd = New-Object System.Data.CData.SparkSQLCommand("UPDATE Customers SET Country='US' WHERE Id = @myId", $conn) $cmd.Parameters.Add(new System.Data.CData.SparkSQLParameter("myId","10456255-0015501366")) $cmd.ExecuteNonQuery()

Apache Spark Data の挿入

$cmd = New-Object System.Data.CData.SparkSQLCommand("UPDATE Customers SET Country='US' WHERE Id = @myId", $conn) $cmd.Parameters.Add(new System.Data.CData.SparkSQLParameter("myId","10456255-0015501366")) $cmd.ExecuteNonQuery()

Apache Spark Data の削除

$cmd = New-Object System.Data.CData.SparkSQLCommand("UPDATE Customers SET Country='US' WHERE Id = @myId", $conn) $cmd.Parameters.Add(new System.Data.CData.SparkSQLParameter("myId","10456255-0015501366")) $cmd.ExecuteNonQuery()
 
 
ダウンロード