Google Cloud Platform Japan 公式ブログ: Google Cloud Platform 運用管理

Google Cloud Platform 運用管理 - Cloud Logging 編

2015年11月24日火曜日

Posted by 八木橋徹平 (Google Cloud Platform シニアソリューションアーキテクト) Google Cloud Logging は、Google Cloud Platform 上の様々なサービスやアプリケーションのログを収集・保管・閲覧することが可能です。また、Cloud Logging 内に保管するだけでなく BigQuery などに直接エクスポートすることにより、ログの加工や分析を柔軟に行えます。 Google Cloud Logging とは？主に下記の３つの機能を提供します。

ログの閲覧：Logs Viewer により様々なサービスのログを閲覧・検索などができます。

アプリケーション・ログの連携：Google Compute Engine の仮想マシンに Logging Agent である google-fluentd をインストールし、アプリケーションのログを Cloud Logging に格納することができます。
また、Logging API によりアプリケーションから直接 Cloud Logging にログを出力することもできます。この場合、ファイルベースでのログ転送は必要ありません。

ログのエクスポート：Cloud Logging 内のログを Cloud Storage のバケット、BigQuery のデータセット、Cloud Pub/Sub のトピックへエクスポートすることが可能です。

Logs Viewer コンソールのメニューから Logging を選択すると Logs Viewer にアクセスができます。対象のサービスからコンポーネントやリソースを選択していくと、ログを閲覧することができます。下記に、Logs Viewer の特徴的な点を２つ挙げます。

ストリーム：新しく追記されたログをリアルタイムに Log Viewer に反映します。

ログベースのメトリック：ログから抽出した値をもとに、Cloud Monitoring のメトリックとして取込むことができます。

アプリケーション・ログの連携

Cloud Logging Agent：google-fluentd によるファイルベースのログ転送

Cloud Logging API：API ベースによるログ転送

Cloud Logging Agent のインストール（ Google Compute Engine インスタンス上）

インストール・スクリプトの取得
$ curl -sSO https://dl.google.com/cloudagents/install-logging-agent.sh
$ sha256sum install-logging-agent.sh

sha256sum コマンドの出力結果が、下記と同一の文字列であることを確認
ec78e9067f45f6653a6749cf922dbc9d79f80027d098c90da02f71532b5cc967 install-logging-agent.sh

インストール・スクリプトの実行
$ sudo bash install-logging-agent.sh

この段階で Logging Agent がテスト用のメッセージを syslog に出力するため、Logs Viewer から確認ができます。

Cloud Logging API の利用アプリケーションから API 経由で、ログを Cloud Logging に書込むことも可能です。この場合、アプリケーション側では出力先のログファイル等を意識する必要はありません。下記は Google App Engine 向けに Go 言語で書かれたログ出力のサンプルになります。12行目でコンテキストを取得し、13行目で実際に Info レベルのログの出力を行っています。

c := appengine.NewContext(r) c.Infof(msg); Google Cloud Dataflow