MicroStrategy Web でCData JDBC Driver を使用してKafka に接続

こんにちは！ウェブ担当の加藤です。マーケ関連のデータ分析や整備もやっています。

MicroStrategy は、データドリブンイノベーションを可能にする分析およびモバイルプラットフォームです。MicroStrategy とCData JDBC Driver for ApacheKafka を組み合わせると、MicroStrategy からデータベースと同じようにリアルタイムKafka のデータにアクセスできるようになり、レポート機能と分析機能が拡張されます。この記事では、MicroStrategy Web の外部データソースとしてKafka を追加し、Kafka のデータの簡単なビジュアライゼーションを作成する方法について説明します。

CData JDBC ドライバーは、ドライバーに組み込まれている最適化されたデータ処理により、MicroStrategy でリアルタイムKafka のデータとやり取りするための比類のないパフォーマンスを提供します。MicroStrategy からKafka に複雑なSQL クエリを発行すると、ドライバーはフィルタや集計などのサポートされているSQL 操作をKafka に直接プッシュし、組み込まれたSQL エンジンを利用してサポートされていない操作（主にSQL 関数とJOIN 操作）をクライアント側で処理します。ビルトインの動的メタデータクエリを使用すると、ネイティブのMicroStrategy データタイプを使用してKafka のデータをビジュアライズおよび分析できます。

MicroStrategy Web を使用してKafka のデータに接続し、ビジュアライズする

CData JDBC Driver for ApacheKafka を使用したデータソースを追加することにより、MicroStrategy Web のKafka に接続できます。^*始める前に、MicroStrategy Web のインスタンスが接続されているMicroStrategy Intelligence Server をホストするマシンにJDBC Driver for ApacheKafka をインストールする必要があります。データソースを作成したら、MicroStrategy Web でKafka のデータの動的なビジュアライゼーションを構築できます。

1. MicroStrategy Web を開き、プロジェクトを選択します。
2. ［Add External Data］をクリックし、［Databases］を選択して［Import Option］として［Select Tables］を使用します。
3. ［Import from Tables］ウィザードでクリックして新しいデータソースを追加します。
4. ［Database］メニューで［Generic］を選択し、［Version］メニューで［Generic DBMS］を選択します。
5. リンクをクリックして接続文字列を表示し、接続文字列を編集するオプションを選択します。「Driver」メニューで、「MicroStrategy Cassandra ODBC Driver」を選択します。（MicroStrategy では、JDBC を介してインターフェースするために認定ドライバーが必要なだけで、実際のドライバーは使用されません。
6. 接続文字列を次のように設定します。 JDBC;MSTR_JDBC_JAR_FOLDER=PATH\TO\JAR\;DRIVER=cdata.jdbc.apachekafka.ApacheKafkaDriver;URL={jdbc:apachekafka:User=admin;Password=pass;BootStrapServers=https://localhost:9091;Topic=MyTopic;};

   Apache Kafka 接続プロパティの取得・設定方法

   .NET ベースのエディションは、Confluent.Kafka およびlibrdkafka ライブラリに依存して機能します。 これらのアセンブリはインストーラーにバンドルされ、自動的に本製品と一緒にインストールされます。 別のインストール方法を利用する場合は、NuGet から依存関係のあるConfluent.Kafka 2.6.0 をインストールしてください。

   Apache Kafka サーバーのアドレスを指定するには、BootstrapServers パラメータを使用します。

   デフォルトでは、本製品はデータソースとPLAINTEXT で通信し、これはすべてのデータが暗号化なしで送信されることを意味します。 通信を暗号化するには：

   1. UseSSL をtrue に設定し、本製品がSSL 暗号化を使用するように構成します。
   2. SSLServerCert およびSSLServerCertType を設定して、サーバー証明書をロードします。

   Apache Kafka への認証

   Apache Kafka データソースは、次の認証メソッドをサポートしています：
   • Anonymous
   • Plain
   • SCRAM ログインモジュール
   • SSL クライアント証明書
   • Kerberos

   Anonymous

   Apache Kafka の特定のオンプレミスデプロイメントでは、認証接続プロパティを設定することなくApache Kafka に接続できます。 こうした接続はanonymous（匿名）と呼ばれます。

   匿名認証を行うには、このプロパティを設定します。

   • AuthScheme：None。

   その他の認証方法については、ヘルプドキュメントを参照してください。

   組み込みの接続文字列デザイナー

   JDBC URL の構築については、Kafka JDBC Driver に組み込まれている接続文字列デザイナーを使用してください。JAR ファイルをダブルクリックするか、コマンドラインからjar ファイルを実行します。

   java -jar cdata.jdbc.apachekafka.jar

   接続プロパティを入力し、接続文字列をクリップボードにコピーします。

   

   JDBC URL を構成する際に、Max Rows 接続プロパティも設定できます。これにより返される行数が制限されるため、レポートやビジュアライゼーションをデザインするときのパフォーマンスを向上させることができます。

7. 新しいデータソースで右クリックし、「Edit catalog options」を選択します。
8. SQL Statement をSELECT * FROM SYS_SCHEMAS に編集し、JDBC Driver からメタデータを読み取ります。
9. 新しいデータソースを選択して使用可能なテーブルを表示します。テーブルを表示するには、「Available Tables」セクションの検索アイコンを手動でクリックする必要があります。
10. テーブルをペインにドラッグしてインポートします。 Note：ライブ接続を作成するので、テーブル全体をインポートしてMicroStrategy 製品に固有のフィルタリングおよび集計機能を利用してデータセットをカスタマイズできます。
11. ［Finish］をクリックして、ライブ接続するオプションを選択してクエリを保存し、新しいドシエを作成するオプションを選択します。CData JDBC ドライバーにネイティブな高性能データ処理を使用して、高性能なライブ接続が可能です。
12. ビジュアライゼーションを選択して表示するフィールドを選択し、フィルタを適用してKafka のデータの新しいビジュアライゼーションを作成します。データ型は動的なメタデータ検出によって自動的に検出されます。可能であれば、フィルタと集計によって生成された複雑なクエリはKafka にプッシュダウンされ、サポートされていない操作（SQL 関数とJOIN 操作を含む）は、ドライバーに組み込まれたCData SQL エンジンによってクライアント側で管理されます。
13. ドシエの構成が完了したら、［File］->［Save］とクリックします。

CData JDBC Driver for ApacheKafka をMicroStrategy Web で使用することで、Kafka のデータで強固なビジュアライゼーションとレポートを簡単に作成することができます。その他の例については、MicroStrategy でKafka に接続やMicroStrategy Desktop でKafka に接続をお読みください。

Note：JDBC Driver を使用して接続するには、3- または 4-Tier Architecture が必要です。