MicroStrategy Desktop でCData JDBC Driver を使ってKafka に接続する

こんにちは！ウェブ担当の加藤です。マーケ関連のデータ分析や整備もやっています。

MicroStrategy は、データ主導のイノベーションを可能にする、モビリティプラットフォームです。MicroStrategy をCData JDBC Driver for ApacheKafka とペアリングすると、MicroStrategy からリアルタイムKafka へのデータベースのようなアクセスが得られ、レポート機能と分析機能が拡張されます。この記事では、MicroStrategy Desktop にデータソースとしてKafka を追加し、Kafka の簡単なヴィジュアライゼーションを作成する方法について説明します。

CData JDBC ドライバーは、ドライバーに組み込まれた最適化されたデータ処理により、MicroStrategy でリアルタイムKafka と対話するための比類のないパフォーマンスを提供します。MicroStrategy からKafka に複雑なSQL クエリを発行すると、ドライバーはフィルタや集計などのサポートされているSQL 操作をKafka に直接プッシュし、組み込みSQL エンジンを利用して、サポートされていない操作(一般的にはSQL 関数とJOIN 操作) をクライアント側で処理します。組み込みの動的メタデータクエリを使用すると、ネイティブのMicroStrategy データタイプを使用してKafka を視覚化および分析できます。

MicroStrategy Desktop を使用してKafka のデータに接続および視覚化する

MicroStrategy エンタープライズ製品のKafka に接続するだけでなく、MicroStrategy Desktop のKafka に接続することもできます。以下のステップに従って、JDBC を使用してKafka をデータセットとして追加し、Kafka の視覚化とレポートを作成します。

1. MicroStrategy Desktop を開き、新しいドシエを作成します。
2. データセットパネルで［New Data］をクリックし、［Databases］を選択して［Import Option］として［Select a Table］を選択します。
3. 新しいデータソースを追加し、DSN レスデータソースオプションを選択します。
4. ［Database］メニューで［Generic］を、［Version］メニューで［Generic DBMS］を選択します。
5. リンクをクリックして接続文字列を表示し、接続文字列を選択して編集します。［Driver］メニューで［MicroStrategy Cassandra ODBC Driver］を選択します。(MicroStrategy では、JDBC を介してインターフェースするために認定ドライバーが必要です。実際のドライバーは使用されません。)
6. 接続文字列を以下のように設定し、［OK］をクリックします。
   • JDBC キーワードを接続文字列に追加します。
   • MSTR_JDBC_JAR_FOLDER をJDBC ドライバーJAR ファイルのパスに設定します。(C:\Program Files\CData JDBC Driver for ApacheKafka\lib\ on Windows.)
   • DRIVER をドライバークラスであるcdata.jdbc.apachekafka.ApacheKafkaDriver に設定します。
   • URL をKafka のJDBC URL に設定し、必要な接続プロパティを設定します。

     Apache Kafka 接続プロパティの取得・設定方法

     .NET ベースのエディションは、Confluent.Kafka およびlibrdkafka ライブラリに依存して機能します。 これらのアセンブリはインストーラーにバンドルされ、自動的に本製品と一緒にインストールされます。 別のインストール方法を利用する場合は、NuGet から依存関係のあるConfluent.Kafka 2.6.0 をインストールしてください。

     Apache Kafka サーバーのアドレスを指定するには、BootstrapServers パラメータを使用します。

     デフォルトでは、本製品はデータソースとPLAINTEXT で通信し、これはすべてのデータが暗号化なしで送信されることを意味します。 通信を暗号化するには：

     1. UseSSL をtrue に設定し、本製品がSSL 暗号化を使用するように構成します。
     2. SSLServerCert およびSSLServerCertType を設定して、サーバー証明書をロードします。

     Apache Kafka への認証

     Apache Kafka データソースは、次の認証メソッドをサポートしています：
     • Anonymous
     • Plain
     • SCRAM ログインモジュール
     • SSL クライアント証明書
     • Kerberos

     Anonymous

     Apache Kafka の特定のオンプレミスデプロイメントでは、認証接続プロパティを設定することなくApache Kafka に接続できます。 こうした接続はanonymous（匿名）と呼ばれます。

     匿名認証を行うには、このプロパティを設定します。

     • AuthScheme：None。

     その他の認証方法については、ヘルプドキュメントを参照してください。

     ビルトイン接続文字列デザイナ

     JDBC URL の構成については、Kafka JDBC Driver に組み込まれている接続文字列デザイナを使用してください。JAR ファイルのダブルクリック、またはコマンドラインからJAR ファイルを実行します。

     java -jar cdata.jdbc.apachekafka.jar

     接続プロパティを入力し、接続文字列をクリップボードにコピーします。

     

     JDBC URL を構成する際に、Max Rows プロパティを定めることも可能です。これによって戻される行数を制限するため、可視化・レポートのデザイン設計時のパフォーマンスを向上させるのに役立ちます。

   以下は一般的な接続文字列です。

   JDBC;MSTR_JDBC_JAR_FOLDER=PATH\TO\JAR\;DRIVER=cdata.jdbc.apachekafka.ApacheKafkaDriver;URL={jdbc:apachekafka:User=admin;Password=pass;BootStrapServers=https://localhost:9091;Topic=MyTopic;};
7. 新しいデータソースを右クリックし、［Edit catalog］オプションを選択します。
8. SQL ステートメントをSELECT * FROM SYS_SCHEMAS に編集し、JDBC ドライバーからメタデータを読み取ります。
9. 新しいデータソースを選択し、使用可能なテーブルを表示します。テーブルを表示するには、［Available Tables］セクションの検索アイコンを手動でクリックする必要がある場合があります。
10. テーブルをペインにドラッグしてインポートします。 Noteライブ接続を作成するため、テーブル全体をインポートしてMicroStrategy 製品に固有のフィルタリングおよび集計機能を利用できます。
11. ［Finish］をクリックし、ライブに接続するオプションを選択します。CData JDBC Drivers のネイティブな高性能データ処理のおかげで、効果的なライブ接続が可能です。
12. ビジュアライゼーションと表示するフィールドを選択し、フィルタを適用してKafka の新しいビジュアライゼーションを作成します。データタイプは、動的メタデータ検出によって自動的に検出されます。可能な場合、フィルタと集計によって生成された複雑なクエリはKafka にプッシュダウンされ、サポートされていない(SQL 関数とJOIN 操作を含み得る) 操作は、ドライバーに埋め込まれているCData SQL エンジンによってクライアント側で管理されます。
13. ドシエの構成が完了したら、［File］->［Save］をクリックします。

MicroStrategy Desktop のCData JDBC Driver for ApacheKafka を使用すると、Kafka で安定したビジュアライゼーションとレポートを簡単に作成できます。その他の例については、MicroStrategy Developer のKafka に接続 やMicroStrategy Web のKafka に接続 などの記事をお読みください。