Powershell からの Kafka データ連携タスクを自動化

詳細情報をご希望ですか?

無償トライアル:

ダウンロードへ

製品の詳細情報へ:

Apache Kafka ADO.NET Provider

Apache Kafka データに連携する.NET アプリケーションを素早く、簡単に開発できる便利なドライバー。



PowerShell から Kafka に簡単に接続する方法をお探しですか? CData ADO.NET Provider for Kafka は、PowerShell スクリプトの優位性を使い、シンプルで簡単に使えるADO.NET インターフェース を提供します。PowerShell スクリプトで、ADO.NET オブジェクトを使って簡単にKafka に接続して、同期、自動化、ダウンロードなどが可能!



CData ADO.NET Provider for Kafka は、ADO.NET 標準インターフェースへ統合し、PowerShell のような. NET アプリケーションからKafka API へのデータ連携を可能にします。このプロバイダーは、Kafka の認証および相互作用を簡単にします。このチュートリアルでは、PowerShell から直接SQL クエリを実行するための、いくつかの一般的なADO.NET オブジェクトの使い方を説明します。

クエリの実行

次の3つのステップに従って create、read、update、およびdelete (CRUD) のデータ連携コマンドを PowerShell からリアルタイムKafka に実行:

  1. プロバイダーのアセンブリをロード:

    [Reflection.Assembly]::LoadFile("C:\Program Files\CData\CData ADO.NET Provider for Kafka\lib\System.Data.CData.ApacheKafka.dll")
  2. Kafka に接続:

    BootstrapServers およびTopic プロパティを設定して、Apache Kafka サーバーのアドレスと、対話するトピックを指定します。

    認可メカニズム

    • SASL PlainUser およびPassword プロパティを指定する必要があります。AuthScheme は'Plain' に設定します。
    • SASL SSLUser およびPassword プロパティを指定する必要があります。AuthScheme は'Scram' に、UseSSL はtrue に設定します。
    • SSLSSLCert およびSSLCertPassword プロパティを指定する必要があります。UseSSL はtrue に設定します。
    • KerberosUser およびPassword プロパティを指定する必要があります。AuthScheme は'Kerberos' に設定します。

    サーバー証明書を信頼する必要がある場合があります。そのような場合は、必要に応じてTrustStorePath およびTrustStorePassword を指定してください。

    $constr = "User=admin;Password=pass;BootStrapServers=https://localhost:9091;Topic=MyTopic;" $conn= New-Object System.Data.CData.ApacheKafka.ApacheKafkaConnection($constr) $conn.Open()
  3. ApacheKafkaDataAdapter のインスタンスを生成してSQL クエリを実行し、結果を出力:

    $sql="SELECT Id, Column1 from SampleTable_1" $da= New-Object System.Data.CData.ApacheKafka.ApacheKafkaDataAdapter($sql, $conn) $dt= New-Object System.Data.DataTable $da.Fill($dt) $dt.Rows | foreach { Write-Host $_.id $_.column1 }

Kafka データの更新

$cmd = New-Object System.Data.CData.ApacheKafkaCommand("UPDATE SampleTable_1 SET Column2='100' WHERE Id = @myId", $conn) $cmd.Parameters.Add(new System.Data.CData.ApacheKafkaParameter("myId","10456255-0015501366")) $cmd.ExecuteNonQuery()

Kafka へのデータの挿入

$cmd = New-Object System.Data.CData.ApacheKafkaCommand("UPDATE SampleTable_1 SET Column2='100' WHERE Id = @myId", $conn) $cmd.Parameters.Add(new System.Data.CData.ApacheKafkaParameter("myId","10456255-0015501366")) $cmd.ExecuteNonQuery()

Kafka データの削除

$cmd = New-Object System.Data.CData.ApacheKafkaCommand("UPDATE SampleTable_1 SET Column2='100' WHERE Id = @myId", $conn) $cmd.Parameters.Add(new System.Data.CData.ApacheKafkaParameter("myId","10456255-0015501366")) $cmd.ExecuteNonQuery()