Power BI Service でリアルタイムCSV のデータをビジュアライズ

こんにちは！ウェブ担当の加藤です。マーケ関連のデータ分析や整備もやっています。

Power BI を使えば会社のデータを美しいビジュアルに変換して収集および整理することができるため、重要なことだけに集中できます。CData Connect Server と組み合わせると、ビジュアライゼーションやダッシュボードなどのためにCSV のデータを使用できます。この記事では、Power BI のCSV のデータからデータセットをデータ構築して公開し、Power BI サービスのCSV のデータに関するレポートを作成する方法について説明します。

CData Connect Server は、CSV に純粋なSQL インターフェースを提供し、データベースにデータを複製することなくPower BI のリアルタイムCSV のデータから簡単にレポートを作成できるようにします。ビジュアライゼーションを作成する際には、Power BI がデータを収集するためのSQL クエリを生成します。CData Connect Server は、最適化されたデータ処理を使用してサポートされているすべてのSQL 操作（フィルタ、JOIN など）をCSV に直接プッシュし、サーバーサイドの処理を利用して、CSV のデータを素早く返します。

注意：（オンプレミスゲートウェイを使用する代わりに）Connect Server を介してCSV のデータをPower BI にインポートすることもできます。詳細については、関連するKnowledge Base の記事を参照してください。

CSV のデータの仮想SQL データベースを作成

CData Connect Server は、簡単なポイントアンドクリックインターフェースを使用してAPI を生成します。

1. Connect Server にログインし、「Databases」をクリックします。
2. 「Available Data Sources」から「CSV」を選択します。
3. 必要な認証プロパティを入力し、CSV に接続します。

   CSV 接続プロパティの取得・設定方法

   DataSource プロパティにローカルフォルダ名を設定します。

   .csv、.tab、.txt ではない拡張子のファイルを扱う場合には、IncludeFiles 使用する拡張子をカンマ区切りで設定します。Microsoft Jet OLE DB 4.0 driver 準拠の場合にはExtended Properties を設定することができます。別の方法として、Schema.ini ファイルにファイル形式を記述することも可能です。

   CSV ファイルの削除や更新を行う場合には、UseRowNumbers をTRUE に設定します。RowNumber はテーブルKey として扱われます。

   Amazon S3 内のCSV への接続

   URI をバケットおよびフォルダに設定します。さらに、次のプロパティを設定して認証します。

   • AWSAccessKey：AWS アクセスキー（username）に設定。
   • AWSSecretKey：AWS シークレットキーに設定。

   Box 内のCSV への接続

   URI をCSV ファイルを含むフォルダへのパスに設定します。Box へ認証するには、OAuth 認証標準を使います。 認証方法については、Box への接続 を参照してください。

   Dropbox 内のCSV への接続

   URI をCSV ファイルを含むフォルダへのパスに設定します。Dropbox へ認証するには、OAuth 認証標準を使います。 認証方法については、Dropbox への接続 を参照してください。ユーザーアカウントまたはサービスアカウントで認証できます。ユーザーアカウントフローでは、以下の接続文字列で示すように、ユーザー資格情報の接続プロパティを設定する必要はありません。

   SharePoint Online SOAP 内のCSV への接続

   URI をCSV ファイルを含むドキュメントライブラリに設定します。認証するには、User、Password、およびStorageBaseURL を設定します。

   SharePoint Online REST 内のCSV への接続

   URI をCSV ファイルを含むドキュメントライブラリに設定します。StorageBaseURL は任意です。指定しない場合、ドライバーはルートドライブで動作します。 認証するには、OAuth 認証標準を使用します。

   FTP 内のCSV への接続

   URI をルートフォルダとして使用されるフォルダへのパスが付いたサーバーのアドレスに設定します。認証するには、User およびPassword を設定します。

   Google Drive 内のCSV への接続

   デスクトップアプリケーションからのGoogle への認証には、InitiateOAuth をGETANDREFRESH に設定して、接続してください。詳細はドキュメントの「Google Drive への接続」を参照してください。

   
4. 「 Test Database」をクリックします。
5. 「Permission」->「 Add」とクリックし、適切な権限を持つ新しいユーザー（または既存のユーザー）を追加します。

Power BI からConnect Server に接続

Power BI サービスでリアルタイムCSV のデータに接続してビジュアライズするには、オンプレミスデータゲートウェイをインストールしてPower BI サービスからゲートウェイにデータソースを追加し、Power BI Desktop からサービスにデータセットを公開します。

オンプレミスデータゲートウェイをインストール

Microsoft オンプレミスデータゲートウェイは、接続されたデータソースとさまざまなMicrosoft ツールおよびプラットフォーム間の安全なデータ転送を提供します。ゲートウェイの詳細については、Microsoft のドキュメントを参照してください。

Power BI サービスからゲートウェイをダウンロードし、インストールできます。

1. PowerBI.com にログインします。
2. 「Download」メニューをクリックし、「Data Gateway」をクリックします。
3. インストールの手順に従ってゲートウェイの名前をメモします。

CSV をデータソースとしてPower BI サービスに追加

データゲートウェイをインストールしたら、Connect Server をデータソースとしてPower BI サービスに追加します。

1. PowerBI.com にログインします。
2. 「Settings」メニューをクリックして「Manage gateways」をクリックします。
3. 「ADD DATA SOURCE」をクリックしてConnect Server への接続を構成します。
   
   
   • Data Source Name をConnect_CSV に設定します。
   • Data Source Type としてSQL Server を選択します。
   • Server をConnect Server インスタンスのアドレスに設定します。（例：CONNECT_SERVER_URL）
   • Database を仮想CSV のデータベースの名前に設定します。（例：csvdb）
   • Authentication Method をBasic に設定します。
   • Username とPassword をConnect Server 資格情報に設定します。

Power BI デスクトップから、データセットを公開

ゲートウェイをインストールし、Connect Server をデータソースとしてPower BI サービスに追加すると、Power BI Desktop からサービスにデータセットを公開できます。

1. Power BIを開いて「Get Data」->「More」とクリックし、SQL Server データベースを選択して「Connect」をクリックします。

2. 接続プロパティを設定設定し、「OK」をクリックします。
   • Server をConnect Server インスタンスのアドレスに設定します。（例：CONNECT_SERVER_URL）
   • Database を仮想CSV のデータベースの名前に設定します。（例：csvdb）
   • Data Connectivity mode をDirectQuery* に設定します。
   * DirectQuery は、CSV のデータのライブクエリ処理とリアルタイムのビジュアライゼーションを可能にします。
3. 「authentication」ウィザードで「Database」を選択してUser name とPassword のプロパティを設定し、「Connect」をクリックします。

4. 「Navigator」ダイアログでテーブルを選択し、ビジュアライズします。

5. 「Query Editor」では、CSV カラムをフィルタリング、並べ替え、要約することでデータセットをカスタマイズできます。「Edit」をクリックしてクエリエディタを開きます。行をフィルターするには、行を右クリックします。カラムヘッダーを右クリックして、次のようなアクションを実行します。

   • カラムのデータタイプを変更
   • カラムの削除
   • カラムをグループ化

   Power BI は、Connect Server によって報告されたCSV メタデータから、各カラムのデータタイプを検出します。

   Power BI は、クエリへの変更を「Applied Steps」セクションに記録し、リモートCSV のデータに対して実行される、基礎となるデータ取得クエリを調整します。「Close and Apply」をクリックすると、Power BI はデータ取得クエリを実行します。

   もしくは、「Load」をクリックしてデータをPower BI にプルします。

6. 「Relationships」タブで選択したエンティティ間の関係性を定義します。
7. 「Home」メニューから「Publish」をクリックして「Workspace」を選択します。

Power BI Service のCSV のデータでレポートとダッシュボードを作成

Power BI サービスにデータセットを公開したので、公開されたデータに基づいて新しいレポートとダッシュボードを作成できます。

1. PowerBI.com にログインします。
2. 「Workspaces」をクリックし、ワークスペースを選択します。
3. 「Create」をクリックし、「Report」を選択します。
4. レポートに使用する公開済みデータセットを選択します。
5. フィールドとビジュアライゼーションを選択してレポートを追加します。

アプリケーションからCSV のデータへSQL アクセス

Power BI サービスからリアルタイムCSV のデータへの直接接続ができるようになりました。これで、CSV を複製せずにより多くのデータソースや新しいビジュアライゼーション、レポートを作成することができます。

アプリケーションから直接250+ SaaS 、Big Data 、NoSQL ソースへのSQL データアクセスを取得するには、CData Connect Server を参照してください。