各製品の資料を入手。
詳細はこちら →製品をチェック
製品の詳細・30日間の無償トライアルはこちら
CData ConnectPower Automate を使用してKafka のデータを自動化タスクに統合
CData Connect Server を使用してKafka のデータの仮想SQL Server データベースを作成し、リアルタイムKafka のデータをPower Automate タスクに統合します。
加藤龍彦デジタルマーケティング
最終更新日:2021-04-09
こんにちは!ウェブ担当の加藤です。マーケ関連のデータ分析や整備もやっています。
Power Automate(旧名:Microsoft Flow)は、一般的なアプリとサービスのイベント(ワークフロー)を自動化するオンラインサービスです。CData Connect Server と組み合わせることで、Kafka のデータを使用した自動化タスクの作成を実現できます。この記事では、Power Automate からConnect Server に接続し、Kafka のデータをワークフローとタスクに統合する方法を説明します。
Power Automate はCData Connect Server をSQL Server データベースとして認識し、最適化されたデータ処理を使用してサポートされているすべてのSQL 操作(フィルタ、JOIN など)をKafka に直接渡し、サーバーサイドの処理を利用してKafka のデータを素早く返します。
以下のステップでは、CData Connect Server のインスタンスが必要になります。まずは、こちらからConnect Server をダウンロード・インストールしてください。
Kafka のデータの仮想SQL データベースを作成する
CData Connect Server を使えば、簡単なポイントアンドクリックインターフェースを使用してデータソースに接続し、API を生成できます。
- Connect Server にログインし、「CONNECTIONS」をクリックします。
- [Available Data Sources]から[Kafka]を選択します。
-
必要な認証プロパティを入力し、Kafka に接続します。
Apache Kafka 接続プロパティの取得・設定方法
.NET ベースのエディションは、Confluent.Kafka およびlibrdkafka ライブラリに依存して機能します。 これらのアセンブリはインストーラーにバンドルされ、自動的に本製品と一緒にインストールされます。 別のインストール方法を利用する場合は、NuGet から依存関係のあるConfluent.Kafka 2.6.0 をインストールしてください。
Apache Kafka サーバーのアドレスを指定するには、BootstrapServers パラメータを使用します。
デフォルトでは、本製品はデータソースとPLAINTEXT で通信し、これはすべてのデータが暗号化なしで送信されることを意味します。 通信を暗号化するには:
- UseSSL をtrue に設定し、本製品がSSL 暗号化を使用するように構成します。
- SSLServerCert およびSSLServerCertType を設定して、サーバー証明書をロードします。
Apache Kafka への認証
Apache Kafka データソースは、次の認証メソッドをサポートしています:- Anonymous
- Plain
- SCRAM ログインモジュール
- SSL クライアント証明書
- Kerberos
Anonymous
Apache Kafka の特定のオンプレミスデプロイメントでは、認証接続プロパティを設定することなくApache Kafka に接続できます。 こうした接続はanonymous(匿名)と呼ばれます。
匿名認証を行うには、このプロパティを設定します。
- AuthScheme:None。
その他の認証方法については、ヘルプドキュメントを参照してください。
- 「 Test Database」をクリックします。
- [Permission]->[ Add]とクリックし、適切な権限を持つ新しいユーザー(または既存のユーザー)を追加します。
CData Connect Server に接続する
Connect Server を使用してKafka のデータをPower Automate タスクに統合するには、新しいSQL Server 接続を作成します。
- まずは、Power Automate にログインします。
- [Data]->[Connections]->[New connection]とクリックします。
- SQL Server を選択します。
- 接続ウィザードにて
- Authentication Type を"SQL Server Authentication" に設定します。
- SQL server name をConnect Server インスタンスのアドレスに設定します。(CONNECT_SERVER_URL)
- SQL database name を以前作成したKafka の名前(kafkadb など)に設定します。
- Username とPassword を設定し、[Create]をクリックします。
Kafka のデータをPower Automate タスクに統合する
Connect Server への接続が構成されたら、いよいよKafka のデータをPower Automate タスクに統合しましょう。
- [My flows]->[New flow]とクリックし、スクラッチまたはテンプレートからフローを作成します。
- フロー内にSQL Server アクション(Get rows など)を追加し、Connect Server に接続するようアクションを構成します。
- 使用するテーブルをドロップダウンメニューから選択し、詳細オプション(フィルタ、オーダーなど)を構成します。
- フローを保存して、テストが成功したら準備は完了です

あらゆるアプリケーションからKafka のデータにSQL でアクセス
以上で、Power Automate タスクからリアルタイムKafka のデータへの接続ができるようになりました。
Connect Server を使えばKafka 以外にも270種類以上のSaaS、ビッグデータ、NoSQL データソースへのSQL アクセスが可能です。ぜひ、こちらから30日間無償トライアルをお試しください。