各製品の資料を入手。
詳細はこちら →
製品をチェック
JDBI からDatabricks データ のデータアクセスオブジェクトを作成
JDBI でDatabricks のデータ 用のSQL オブジェクトAPIを作成する方法を概説します。
最終更新日：2022-05-25
この記事で実現できるDatabricks 連携のシナリオ
こんにちは！ウェブ担当の加藤です。マーケ関連のデータ分析や整備もやっています。
JDBI は、Fluent スタイルとSQL オブジェクトスタイルという2つの異なるスタイルAPI を公開する、Java 用のSQL コンビニエンスライブラリです。CData JDBC Driver for Databricks は、Java アプリケーションとリアルタイムDatabricks のデータ のデータ連携を実現します。これらの技術を組み合わせることによって、Databricks のデータ へのシンプルなコードアクセスが可能になります。ここでは、基本的なDAO（Data Access Object ）とそれに付随するDatabricks のデータ の読み書きのためのコードの作成について説明します。
Databricks Customers Entity のDAO を作成
以下のインターフェースは、実装されるSQL ステートメントごとに単一のメソッドを作成するためのSQL オブジェクトの正しい動作を宣言します。
public interface MyCustomersDAO {
//insert new data into Databricks
@SqlUpdate("INSERT INTO Customers (Country, CompanyName) values (:country, :companyName)")
void insert(@Bind("country") String country, @Bind("companyName") String companyName);
//request specific data from Databricks (String type is used for simplicity)
@SqlQuery("SELECT CompanyName FROM Customers WHERE Country = :country")
String findCompanyNameByCountry(@Bind("country") String country);
/*
* close with no args is used to close the connection
*/
void close();
}
Databricks への接続を開く
必要な接続プロパティを収集し、Databricks に接続するための適切なJDBC URL を作成します。
Databricks 接続プロパティの取得・設定方法
Databricks クラスターに接続するには、以下のプロパティを設定します。
- Database：Databricks データベース名。
- Server：Databricks クラスターのサーバーのホスト名。
- HTTPPath：Databricks クラスターのHTTP パス。
- Token：個人用アクセストークン。この値は、Databricks インスタンスのユーザー設定ページに移動してアクセストークンタブを選択することで取得できます。
Databricks への認証
CData は、次の認証スキームをサポートしています。
- Basic
- 個人用アクセストークン
- Azure Active Directory（AD）
- Azure サービスプリンシパル
- OAuthU2M
- OAuthM2M
Basic
Basic 認証には、ユーザー名とパスワードが必要です。以下を設定します。
- AuthScheme：Basic。
- User：ユーザーネーム。これはデフォルト値（"Token"）をオーバーライドします。
- Token：パスワード。
その他の認証方法については、ヘルプドキュメント の「はじめに」セクションを参照してください。
ビルトイン接続文字列デザイナー
JDBC URL の構成については、Databricks JDBC Driver に組み込まれている接続文字列デザイナーを使用してください。JAR ファイルのダブルクリック、またはコマンドラインからJAR ファイルを実行します。
java -jar cdata.jdbc.databricks.jar
接続プロパティを入力し、接続文字列をクリップボードにコピーします。
Databricks の接続文字列は、通常次のようになります。
jdbc:databricks:Server=127.0.0.1;Port=443;TransportMode=HTTP;HTTPPath=MyHTTPPath;UseSSL=True;User=MyUser;Password=MyPassword;
構成済みのJDBC URL を使用して、DAO インターフェースのインスタンスを取得します。以下に示す特定のメソッドはインスタンスにバインドされたハンドルを開くため、ハンドルとバインドされたJDBC 接続を開放するには、インスタンスを明示的に閉じる必要があります。
DBI dbi = new DBI("jdbc:databricks:Server=127.0.0.1;Port=443;TransportMode=HTTP;HTTPPath=MyHTTPPath;UseSSL=True;User=MyUser;Password=MyPassword;");
MyCustomersDAO dao = dbi.open(MyCustomersDAO.class);
//do stuff with the DAO
dao.close();
Databricks データ について
Databricks への接続を開いた状態で以前定義したメソッドを呼び出すだけで、Databricks のCustomers エンティティからデータを取得できます。
//disply the result of our 'find' method
String companyName = dao.findCompanyNameByCountry("US");
System.out.println(companyName);
Databricks データ の書き方
以前定義した方法を使用すれば、Databricks にデータを書き込むことも簡単になります。
//add a new entry to the Customers entity
dao.insert(newCountry, newCompanyName);
JDBI ライブラリはJDBC 接続を処理できるため、CData JDBC Driver for Databricks と統合することで、SQL Object API for Databricks を簡単に作成できます。今すぐ無料トライアルをダウンロードし、Java アプリケーションでリアルタイムDatabricks を操作しましょう。
関連コンテンツ
