Google Cloud Platform Japan 公式ブログ: Tableau、Google BigQuery、Twitter によるツイートストリームの視覚化ソリューションデモ

Tableau、Google BigQuery、Twitter によるツイートストリームの視覚化ソリューションデモ

2015年8月6日木曜日

Jeff Feng と Ellie Fields によって投稿されたもの
Tableau 「よりすぐりの技術（Tableau、Google BigQuery、Twitter）が集結し、相互に連携してシームレスに機能するのは素晴らしいことです」- ジェフフェン氏 Google Cloud Platform グローバルイベント NextTableauGoogle Cloud Platform グローバルイベント NextGoogle Cloud Platformニューヨークサンフランシスコ東京ロンドンアムステルダム

*ニューヨークでの Next で開催された Data & Analytics Talk で Twitter に関する共同デモを行ったエリー（左）

*アムステルダムでの Next でハッシュタグ #GCPNext が付いたツイートの視覚化ソリューションについて講演したジェフ（右）

Tableau、Google BigQuery、Twitter によるツイートストリームの視覚化

私たち Tableau は Next の中で、私たちの技術をクローズアップして紹介するライブデモを実施しようと考えました。Google BigQuery は、PByte 規模のデータを数秒で処理し、高速に取り込めます。BigQuery に対する Tableau のライブ接続機能を利用すれば、Tableau のドラッグ＆ドロップインタフェースを使って数分で強力なダッシュボードを構築し、BigQuery の便利さをすべてのユーザーに届けることができます。このデモでは、ハッシュタグ #GCPNext の付いた、つまり Next に関するリアルタイムツイートを視覚化しようという方針を決めました。

BigQuery と Tableau の利用によるツイートストリームの視覚化の全体的なアーキテクチャ

私たちは、ツイートストリームを BigQuery に直接送信する Twitter-for-BigQuery というオープンソースコネクタを開発した Twitter の友人達（@TwitterDev）と協力しました。このコネクタは、定義されたツイートストリームの直近の 30 日間のデータを引き出すこともできます。コネクタの API は Gnip から提供されています。Gnip は、Twitter ストリーム全体に対するエンタープライズグレードのアクセスとフィルタリングを提供しています。

ユーザーはこのコネクタにより、特定のハッシュタグやユーザー名のフィルタを定義できます。そのため、Tabledata.insertAll メソッドを使って、こうしたフィルタと一致するツイートのストリームを BigQuery にリアルタイムに直接送信できます。デモのために、私たちのツイートストリームでは #bigdata、#IoT、#GCPNext といったハッシュタグや @Google といったユーザー名を含むツイートが取り上げられました。

データは BigQuery のテーブルに入ると、Google インフラの処理能力を利用して、超高速な SQL 風のクエリでアクセスできるようになります。Google は、SQL の書き方を知っているアナリストや開発者にとって便利なコマンドラインインタフェースのコンソールを提供しています。

Tableauは、誰でもデータを利用できるようにドラッグ＆ドロップのビジュアルなデータインタフェースを提供し、共同ソリューションを強化しました。さらに、BigQuery の REST API を使った私たちのライブネイティブ Google コネクタのおかげで、ユーザーは私たちのインタフェースを利用しながら、Google の巨大なインフラを最適に活用できます。また、Tableau と Google BigQuery チームは、私たちの共同ソリューションからユーザーが最大限の恩恵を受けられるように、ベストプラクティスをまとめたホワイトペーパーを共同で公開しています。

私たちは Tableau Desktop を使ってデータに接続し、以下のダッシュボードを構築して、ユーザーがフィルタリングされたツイートストリームに対してキーワード検索を行えるようにしました。さらに、BigQuery に対するライブデータ接続とダッシュボードを Tableau Online で公開しました。私たちのホステッドアナリティクスプラットフォームである Tableau Online は、BigQuery を完全に補完します。Tableau Onlineもユーザー側では運用管理や保守が全く不要だからです。BigQuery へのライブ接続もサポートしています。

ダッシュボードは、日ごとのストリームの総ツイート数とキーワードの出現率を示すだけではありません。下部の散布図上の点にマウスポインタを合わせると、実際のツイート自体も視覚化できます。

Google BigQuery を利用してライブツイートストリームを視覚化する Tableau Online のインタラクティブダッシュボード

以下の動画では、「私たちがデモ用に構築した Tableau Online の視覚化ソリューションがどのように利用できるか」「BigQueryへのライブデータ接続を使って新しい視覚化ソリューションをどのように Tableau Online から直接構築できるか」をエリーが説明します。

Google BigQueryを利用してライブツイートストリームを視覚化するTableau Onlineをメインに紹介するデモ動画

次の展開は？

私たち Tableau は、データの未来はクラウドにあると確信しています。Google がクラウドインフラでイノベーションを進め、未来のサービスを今、構築していることに共感しています。最近、Google Cloud SQL への新しいコネクタを発表したのもそのためです。このコネクタにより、Google Cloud Platform と Tableau Online を利用するお客様は、データのホストと分析を完全にクラウドで行える環境の実現に一歩近づきます。また、このコネクタは、Google BigQuery および Google Analytics に対する私たちの既存のネイティブコネクタを補完するものでもあります。私たちは今後も、ユーザーに喜んでもらえるように、Google のサービスや技術とのより幅広く深い統合の実現に力を注いでいきます。