Google Cloud Platform Japan 公式ブログ

うるう秒がやって来る！〜 6 月 30 日の ” 1 秒”に備えよう〜

2015年5月26日火曜日

* この投稿は、米国時間 5 月 21 日、Site Reliability Engineers の Noah Maxwell & Michael Rothwell によって投稿されたものの抄訳です。うるう秒Google Compute Engine うるう秒って何？うるう秒はどうやって発生するの？たとえば Google はうるう秒にどう対処するの？ブログなぜうるう秒をぼかすの？ Google Cloud Platform のどのサービスが影響を受けるの ? どのような影響を受けるの？Leap Indicator Google の NTP サービスはどうなっているの？ここHelp & Support Center

-Posted by Noah Maxwell & Michael Rothwell, Site Reliability Engineers

Google Cloud Launcher に 25 の新ソリューションを追加、Cloud Monitoring も統合

2015年5月22日金曜日

* この投稿は、米国時間 5 月 21 日、Group Product Manager の Ophir Kra-Oz によって投稿されたものの抄訳です。去る 3 月、Google は Google Cloud Launcher の利用開始を発表しました。Bitnami か Google Click to Deploy で設定された、人気の高い 120 種類以上のオープンソースアプリケーションパッケージを起動できるようにしたのです。それ以来、Google には多くのお客様からソリューション追加のリクエストが届きました。そうしたリクエストに Google はお応えします。 3 月の発表からまだ 3 か月も経っていませんが、Cloud Launcher に 25 種類の新しいソリューションを追加しました。新たに追加されるのは、Chef、Crate、OpenCart、Sharelock、Codiad、SimpleInvoices などです。ソリューションは今後も随時追加していきます。
同時に、14 種類の新 OS を Cloud Launcher に追加します。この中には、Windows、Ubuntu、Redhat、SUSE、Debian、CentOS が含まれます。作業をすばやくシンプルなものにするため、初期作成フローも単純化しました。

図 1 - アップデートされた Cloud Launcher の OS セクション Cloud Launcher のソリューションインターフェースも新しくなりました。ソリューションを比較しやすくするため、価格、サポート（ OS のみ）、無料体験の詳細情報が追加されています。

図 2 - アップデートされた Cloud Launcher のソリューション詳細インターフェース
すぐにデプロイできる完全なソリューションを提供するという Google のビジョンに則り、50種のソリューションについては Google Cloud Monitoring を統合することとしました。MySQL、Apache、Cassandra、Tomcat、PostgreSQL、Redis といったコンポーネントにはレポートが組み込まれ、DevOps にアプリケーションの統合ビューを提供します。

図 3 - Apache Web Server のための Google Cloud Monitoring Dashboard
今から Cloud Launcher を始めても、Google Cloud Platform 上で使いたいアプリケーションパッケージをものの数分で起動できます。そしてぜひ、Cloud Launcher 内のリンクからご意見をお寄せください。メーリングリストにも参加して、アップデート情報を受け取り、議論に参加してください。快適なシステム構築を！

ビッグデータを低コストで超高速転送

2015年5月21日木曜日

* この投稿は、米国時間 5 月 12 日、 Software Engineer の Stanley Feng によって投稿されたものの抄訳です。どんなアプリケーションでも、少なくとも何らかのデータがなければ動きません。ゲーム分析、気象予報モデリング、ビデオレンダリング、Apache Flume や MapReduce などのツール、データベースのレプリケーションといったビッグデータアプリケーションは、言うまでもなく大量のデータを処理、転送します。一見単純なウェブサイトでも、辞書、記事、画像、その他あらゆるタイプのデータを VM 間でコピーしなければならないことがあります。そして、そのようなデータでも、蓄積されればかなりのサイズになるかもしれません。しかも、データにはファイルシステムを介してアクセスしなければならないことがあります。すると、scp のような旧来のツールでは、増えていくデータサイズに対応しきれなくなる恐れがあります。
一般に、ビッグデータアプリケーションはディスクからデータを読み出し、それを変換してから scp などのツールでデータを他の VM に転送して、さらなる処理を行います。scp は、スレッディングモデルから VM CPU の暗号化ハードウェアに至るさまざまな面で制限を抱えており、最終的には VM 当たりの仮想ディスク読み書きクォータによって制限されます。scp の転送速度は 128 MB / 秒（シングルストリーム）か 240 MB / 秒（マルチストリーム）ほどです。
現在のフローを図示すると、次のようになります。

一般的なデータパイプラインのシナリオ
ここでは、VM 間で大量のデータを転送するためのまったく新しい方法を紹介します。Google Compute Engine Persistent Disks は、ディスク上のすべてのデータのポイントインタイムコピーを作る Snapshots という機能を持っています。この機能は一般にバックアップのために使われますが、すぐに新しいディスクに変換することもできます。このようにして作った新ディスクは、作成元とは異なる実行中の VM にアタッチ（接続）できます。こうすると、第 1 の VM から第 2 のVM にデータを転送できるわけです。スナップショット機能を使ったデータ転送は、次に示す 3 つの単純な手順で実行できます。

ソースディスクからスナップショットを作ります。

新しいデスティネーションディスクにスナップショットをダウンロードします。

新しい VM にデスティネーションディスクをアタッチ、マウントします。

Persistent Disk Snapshot を使えば、1024 MB / 秒（ 8 Gbps ）以上のスピードで、VM 間でデータを転送できます。これは、scp の 8 倍のスピードです。次のグラフは、scp と Persistent Disk Snapshot を使ったときのデータ転送速度を比較したものです。

scp と PD Snapshot のデータ転送速度比較
スナップショット機能を使ったデータ転送でとてつもなく大きなメリットが得られるのは、Persistent Disk Snapshot のパフォーマンスが非常に高いからです。次のグラフは、永続ディスクのスナップショットを取得するのに要する時間と実効スループットを示しています（この実験では PD-SSD が使用されています）。スナップショットを取得するのに要する時間（青い棒グラフ）は、サイズが 500 GB まではほぼ同じで、1 TB になると少し長くなっています。そのため、スナップショットプロセスの実効スループット（スピード）は、ほぼ線形に増えていきます（赤の折れ線グラフ）。

Google Compute Engine Persistent Disk Snapshot のスピードは、業界内でも突出しています。次のグラフは、スナップショット機能を提供している他のクラウドプロバイダーとの間でアップロード時間を比較したものです。ご覧のように、Google Compute Engine のアップロード時間はサイズが大きくなってもほとんど変わりませんが、競合他社の場合のアップロード時間はサイズの増加とともに顕著に上がっていきます。

Google Compute Engine のテストは、PD-SSD を使用して us-centra1-f で実行。スナップショットサイズは、32 GB、100 GB、200 GB、500 GB、1000 GB
Persistent Disk の価格は 1 か月当たり 2.6 セント / GB です。 VM の利用料金以外に、これだけのコストがデータコピーのためにかかるのは高いと思われるかもしれません。しかし、転送目的で使われるスナップショットは短命（ 10 分未満）で、価格は秒単位で比例案分されるので、実際の平均コストは 500 GB のデータの転送ごとに 0.003 ドルほどです。スナップショットは転送が完了したら直ちに削除できます。そのため、1 セント未満の料金で、かつ従来のツールの 8 倍のスピードで 1 TB のデータを転送できることになります。
実際に試してみたい方は、ドキュメントにスナップショットコマンドの詳しい説明があります。また、Persistent Disk Snapshot の安全な使い方については、以前のブログを参照してください。快適なスナップショットライフを！
-Posted by Stanley Feng, Software Engineer, Cloud Performance Team

Google Cloud Platform の価格を引き下げ

2015年5月19日火曜日

* この投稿は、米国時間 5 月 18 日、Technical Infrastructure の Senior Vice President、Urs Hölzle によって投稿されたものの抄訳です。クラウドサービスのプロバイダーには多くの選択肢があります。しかし、アプリケーションやワークロードに最適なクラウドサービスの選択は、意外と難しいのではないでしょうか。 Avaya や Snapchat、Ocado、Wix などのお客様には、Google のイノベーションと実証済みのパフォーマンスに加えて、柔軟な価格モデルを備えた Google Cloud Platform を選択いただきました。最近では、低価格で高速なコールドデータサービスの Google Cloud Storage Nearline や NoSQL データベースの Google Cloud Bigtable などの新しいサービスをご紹介しましたが、本日発表の価格改訂は、Google Cloud Platform の魅力をさらに引き上げることができると考えています。
本日、すべての Google Compute Engine インスタンスタイプの価格を引き下げるだけでなく、短期的でステートレスな計算能力を提供する、新しいクラスのプリエンプティブル VM を、非常に低価格かつ固定料金制のプランでご案内できることを発表しました。自動割引、分単位の課金、マシンタイプ変更へのペナルティがないこと、長期的コミットメントが必要ないことなどと相まって、私たちが価格やパフォーマンスで業界をリードしている理由がおわかりいただけると思います。
プライスダウン 昨年、Google Cloud Platform の価格はムーアの法則に従うことをお約束しました。そして本日、その約束を果たすべく、仮想マシンの価格を最大 30 %まで引き下げます。

設定	価格引き下げ率（米国）

Standard High Memory High CPU Small Micro	20% 15% 5% 15% 30%

欧州とアジアでも、同様に価格を引き下げます。Google Cloud Platform の価格に関する詳細は、Compute の価格に関する詳細は、Compute Engine 価格ページをご覧ください。

上図のように、Google Compute Engine の価格は、2013 年 11 月の発売以来、下がり続けています。 Google Compute Engine プリエンプティブル VM の特徴 もしワークロードが柔軟なら、新しいプリエンプティブル VM は短期間のバッチジョブをレギュラー VM よりも 70 ％安価に実行できます。プリエンプティブル VM はレギュラー VM とそっくりですが、可用性がシステムの供給と需要に影響されることが異なります。プリエンプティブル VM は、アイドル状態となるはずのリソースを活用して実行されるため、実質的なコスト削減をもたらします。Descartes Labs などのお客様は、Hadoop MapReduce や視覚的効果のレンダリング、財務分析、その他の計算処理などのワークロードにとって、プリエンプティブル VM が素晴らしいオプションになりうることをすでに理解されています。
重要なのは、プリエンプティブル VM の価格が固定されていることです。他のクラウドプロバイダーのインスタンスとは異なり、プリエンプティブル VM ではコストを正確に予測できるのです。

Regular n1-standard-1		Preemptible n1-standard-1	コスト低減率
$0.050 ／時間		$0.015 /時間	70%

プリエンプティブル VM の価格については、Google のドキュメントページを参照ください。価格に関する詳細は、価格ページをご覧ください。まずは手始めとして、ワークロードをテストできる無料トライアルもご用意しています。

- Posted by Urs Hölzle, Senior Vice President, Technical Infrastructure

プリエンプティブル VM 登場: 標準価格の 3 割で使える、まったく新しい VM

2015年5月19日火曜日

* この投稿は、米国時間 5 月 18 日、Senior Product Manager の Paul Nash によって投稿されたものの抄訳です。多くのデベロッパーは、単にウェブサービスを利用することにとどまらず、膨大な計算能力を必要とするワークロードのためにクラウドを利用しています。クラウドなら、スケーラビリティが高く”ペイアズユーゴー”（使った分だけの課金）で高いコストパフォーマンスが得られます。クラウドで行われている処理は、ビデオエンコード、ビジュアルエフェクトのレンダリング、データ解析やシミュレーション、ゲノミクスのためのビッグデータクランチングなどです。これらのユースケースは、大量のコンピューティングリソースを消費しますが、大抵は散発的に実行されるだけなので、クラウドコンピューティングはベストマッチです。
そして今日、すべての地域のすべてのお客様を対象として、Google Compute Engine プリエンプティブル VM をベータリリースしました。プリエンプティブル VM は、通常のインスタンスとまったく同じですが、1 つだけとても大きな違いがあります。プリエンプティブル VM は、いつシャットダウンされるかもしれないのです。ずいぶん乱暴な話に聞こえるかもしれませんが、1 つのインスタンスを継続的に使える状態にしておく必要のない、分散的でフォールトトレラントなワークロードでは、この特徴が大きくものを言います。無期限のアップタイムの保証を捨てれば、通常のインスタンスよりも大幅に料金が安くなるのです。プリエンプティブル VM の価格は固定です。変化する市場価格のもとで賭けに出るリスクを負わずに、いつでも低コストが保証され、必要コストが予測できます。使い始めた最初の瞬間からコスト節減効果が上がります。価格は、コア時間あたりわずか 0.01 ドルです。
一部のお客様は、すでにプリエンプティブル VM でコスト削減を実現しています。

Citadel 社は、クラウドソリューションの一部としてプリエンプティブル VM を使っています。同社 CIO の Joe Squeri 氏は、次のように述べています。「これは最高の効率、イノベーション、達成だ。私たちはクラウドのリソース消費が大きいので、地域によって変わる価格体系をうまく使いこなすという複雑でわかりにくい作業をせずに、魅力的な価格で使える Google Cloud Platform のプリエンプティブル VM を歓迎している」

ディープラーニング AI の Descartes Labs 社は衛星画像の解釈に力を入れており、最近では約 3 万の CPU を使って、わずか 16 時間で 1 ペタバイトの NASA の画像を処理するという大規模な実験を成功させています。同社 CEO で共同創設者の Mark Johnson 氏は、次のように述べています。「シードファンドで成り立っている私たちのようなスタートアップ企業からすると、大幅なコストダウンを実現できるプリエンプティブル VM の価格モデルは画期的だ。全世界の作物の作況を確認、判定するための処理データが増えているだけに、将来もこのサービスを使い続けられるのはとてもすばらしい」

Google 自身の Chrome セキュリティチームは、数千の仮想マシンで実行されている Chrome 最新コードに対し、Clusterfuzz ツールを使ってノンストップの無作為なセキュリティテストを実行しています。計算能力を上げれば、セキュリティバグを今までよりも早く見つけ早く修正できるようになります。プリエンプティブル VM の導入により、同チームはコストを半減させつつ、2 倍の規模でテストできるようになりました。

Google のデータセンターでは、さまざまな理由により予備リソースを維持していますが、プリエンプティブル VM はこの予備能力を活用します。Google のデータセンター利用率を最適化するために必要になったときには、Google が能力を回収できるようになっています。その代わり、Google はこの種の仮想マシンを大幅に値引きして提供します。ただし、プリエンプティブル VM の実行時間は 24 時間に制限され、それよりも早くプリエンプション（シャットダウン）される場合もあります。しかし、この制限を除けば、高速で簡単なプロビジョニング、一貫して高いパフォーマンス、永続ディスクに書き込まれるデータの常時暗号化など、Google Compute Engine のすべての機能が手に入ります。
プリエンプティブル VM は、今ある Google のツールを使って作ることができます。Google Developer Console で 1 つのボックスにチェックをいれるか、gcloud コマンドラインに “--preemptible” を追加するかです。プリエンプティブル VM が強制終了されるときには、30 秒前に通知が届くので、その時間を使ってクリーンにシャットダウンすることができます（保存も含みます）。
Hadoop on Google Compute Engine を使っているお客様には、さらに簡単な方法があります。オープンソースの bdutil ツールを使えば、Connector for Hadoop を介して Google Cloud Storage から直接データを取ってくる Hadoop クラスタを作れますが、bdutil はプリエンプティブル VM をミックスインできるようになりました。 “--preemptible .25” を追加すれば、クラスタの 25 %をプリエンプティブル VM として実行することができます（割合は自由に設定できます）。
プリエンプティブル VM の詳細な使い方についてはドキュメントを参照してください。価格体系の詳細については、Compute Engine 価格ページを参照してください（価格計算機ツールとクラウドプロバイダー間の本当の価格比較の詳細も同じページにあります）。疑問、フィードバックなどがある場合には、getting help page をご利用ください。
プリエンプティブル VM は、Google Cloud Engine から最大限の価値を引き出すために間違いなく役立ちます。これを使ってすばらしい新アプリケーションを作られたら、是非お話をお聞かせください。
-Posted by Paul Nash, Senior Product Manager

分散 SQL データベースの Crate が Google Compute Engine で Click-to-Deploy 可能に

2015年5月18日月曜日

* この投稿は、米国時間 5 月 7 日、ゲストの Tyler Randles 氏によって投稿されたものの抄訳です。今回のゲストは Tyler Randles 氏です。Tyler は、オープンソースの分散型 SQL データベースソフトウェアである Crate のデベロッパーエバンジェリストです。Crateシェアードナッシングアーキテクチャクエリのパフォーマンスを向上自社のテクノロジースタックを簡略化TechCrunch Disrupt を受賞Click-to-Deploy

Compute EngineClick-to-Deploy ソリューションCrate と Google意見をお聞かせください

- Google Cloud Platform Japan Team

Google Cloud Debugger が Google App Engine に対応 - トラブルシューティングをもっと容易に

2015年5月15日金曜日

* この投稿は、米国時間 5 月 7 日、Product Manager の Keith Smith によって投稿されたものの抄訳です。Cloud DebuggerGoogle Cloud DebuggerGoogle Compute EngineGoogle App Engine

メールでのフィードバックStack Overflow-Posted by Keith Smith, Product Manager

Google Cloud Platform Japan Blog

うるう秒がやって来る！〜 6 月 30 日の ” 1 秒”に備えよう〜

Google Cloud Launcher に 25 の新ソリューションを追加、Cloud Monitoring も統合

ビッグデータを低コストで超高速転送

Google Cloud Platform の価格を引き下げ

プリエンプティブル VM 登場: 標準価格の 3 割で使える、まったく新しい VM

分散 SQL データベースの Crate が Google Compute Engine で Click-to-Deploy 可能に

Google Cloud Debugger が Google App Engine に対応 - トラブルシューティングをもっと容易に

12 か月間のトライアル

Labels

Archive

Feed

Company-wide

製品・サービス

デベロッパー