GCPUG Shimane 2017/11/22 でお話させていただいた資料です。

1. Proprietary + Confidential
GCP概要
Google Cloud Platform 概要
for GCPUG Shimane
Kiyoshi Fukuda 福田 潔
Google Cloud
Customer Engineer

2. Confidential + Proprietary
10億人を超えるユーザー

4. Enterprise

5. 過去3年間で
$29.4B (約3兆5千億円）の投資

6. FASTER Cable System, 2016 10Tb/s of 60 Tb/s Total

7. Proprietary + Confidential00 | Google Cloud Security
Tannat (BR, UY, AR)
in construction
FASTER (US, JP, TW) 2016
SJC (JP, HK, SG) 2013
3
3 3
3
Frankfurt
Singapore
S Carolina
N Virginia
Belgium
London
Taiwan
Tokyo
Mumbai
Sydney
Oregon
São Paulo
Finland
3
Montreal
California
Netherlands
3
Monet (US, BR)
in construction
for 2017
Junior (Rio, Santos)
in construction
Unity (US, JP) 2010
2
PLCN Unity (HK, LA)
in construction for 2018
世界に広がる GCP インフラおよびネットワーク
Current regions and
number of zones
Edge points of presence (>100)
Leased and owned fiber
Future regions and
number of zones
#
#
3
3
3
2
3
4
Iowa
3
3
3
3

8. データセンター内の
高速ネットワーク
● カスタムメードの第 5 世代ネッ
トワークファブリック
● 1Pbps = 100K 台のマシン x
10Gbps
Jupiter

9. Borg
大規模クラスタ
管理システム
● Google ではすべてが
コンテナ内で動いている
● インフラとアプリケーションの分離
● Prod と Non-Prod が
同一のマシン上で実行

10. VIRTUAL NETWORK
LOAD BALANCING
CDN
DNS
INTERCONNECT
View the entire list at
cloud.google.com/launcher
Google Cloud Platform
Management Compute Storage Networking Data
Machine
Learning
Launcher
GOOGLE
STACKDRIVER
IDENTITY AND
ACCESS
MANAGEMENT
SUPPORT
CLOUD MACHINE
LEARNING
SPEECH API
VISION API
TRANSLATE API

11. インフラストラクチャ
高速 かつ スケーラブル: 高速な VM 起動, すべてのスト
レージクラスにミリ秒単位でアクセス , vCPUあたり高IOPS,
高帯域グローバル・ネットワーク
信頼性: 組み込まれた冗長性と拡張性 , ライブマイグレー
ション, Google Site Reliability Engineering がお客様の
ワークロードを守る
お客様に優しい価格体系 : シンプルで効率的: 秒単位の
課金, カスタム VM, 自動割引, 柔軟な一括購入割引
グローバルカバレッジ : 2017-18年に新たに11のリージョ
ンを提供しトータル17に。各リージョンで高可用性確保
00 | Google Cloud Platform

12. グローバル VPC
1つの VPC で複数のリージョンをカバー

13. 共有可能な VPC
VPC を別プロジェクトと共有することが可能

14. 拡張可能な VPC
ダウンタイムなしに IPスペースを拡張できる

15. Maya in California
50.1.1.1
Bob in London
70.1.1.1
Kiyoko in Tokyo
80.1.1.1
Cloud
DNS
www.myapp.com
200.1.1.1
Region: US-West
Serving Instances
Compute Engine
Autoscaling
Region: Europe-West
Serving Instances
Compute Engine
Autoscaling
Region: Tokyo
Serving Instances
Compute Engine
Autoscaling
10.240.0.0/16 192.168.0.0/16 10.2.0.0/16
Google
Network
www.myapp.com
www.myapp.com www.myapp.com www.myapp.com
Google
Edge POP
Google
Edge POP
Google
datacenters
グローバル負荷分散 : クロスリージョン フェイルオーバー
マルチリージョンのインスタンスがフロ
ントエンドアドレスとして1 つの IPv4
VIP アドレスを持つ。クロスリージョン
オーバーフローおよびフェイルオー
バーをサポート―― Google Cloud な
らでは。
Google
Edge POP
Google Global Load Balancing
IPv4 VIP 200.1.1.1

16. Maya
Frontend
Frontend
US-West
Europe-West
Tokyo
Google Cloud Storage
Cloud CDN
Bob
Kiyoko
Stackdriver Monitoring
& Logging
Autoscaling
Autoscaling
Global Load Balancing
HTTP(S) LB
Cache hit!
Cloud CDN で最適化
● 80 以上のロケーション
● 複数のリージョンで 1 つの IP アドレス
● HTTP(S) コンテンツの CDN を 1 つのチェックボックスで有効に
● インスタンスやストレージ バケットからのコンテンツをキャッシュ
● キャッシュの無効化
● カスタム キャッシュ キー
● SSL（TLS トラフィック）は追加料金不要
● 業界をリードするパフォーマンス（ Cedexis 調べ）

17. FASTER (US, JP, TW) 2016
Unity (US, JP) 2010
SJC (JP, HK, SG) 2013
エッジ POP（>100）
リースまたは自社所有の光ファイバー
#
#
開設予定のリージョンとゾーン数
現在のリージョンとゾーン数
3
3
2
3
3
3
3
2
4
3
3
2
Frankfurt
Singapore
S Carolina
N Virginia
Belgium
London
Taiwan
Mumbai
Sydney
Oregon Iowa
São Paulo
Finland
Tokyo
Montreal
California
Netherlands
3
3
3
Google のグローバル インフラで提供される Cloud LB / CDN
https://peering.google.com
https://cloud.google.com/compute/docs/regions-zones/regions-zones
4
Google
Edge POP
Google Region
9 つのリージョン、27 のゾーン、100 以上の接続ポイント（POP）、および延べ数十万 km に及ぶ光ファイバー ケーブルで構築され、
適切にプロビジョニングされたグローバル ネットワーク
Google
Backbone
3
3

18. Google Cloud
Datacenters
Google
Tokyo POP
ISP Network
(Internet)
Google
Edge POP
Google
Edge POP
Google
Edge POP
Kiyoko
Cloud Edge
B2 WAN
B4
WAN
Google
Backbone
グローバル負荷分散= エッジでの負荷分散
Google Front End（GFE）= ソフトウェアデファインドな分散システム。
Google の POP で動作し、他のシステム / コントロール プレーンと連携してグローバル負荷分
散を実行する。
Tokyo
Region
エッジにおけるソフトウェアデファインドなグローバル負荷分散

19. Google Cloud
Datacenters
Google
Edge POP
ISP Network
(Internet)
Google
Edge POP
Google
Edge POP
Google
Edge POP
Cloud Edge
B2 WAN
B4
WAN
Google
Backbone
Cloud CDN = エッジでのキャッシング
Kiyoko
Cloud CDN = 地球規模でのエッジ キャッシング

20. エッジ + バックボーン = 低レイテンシ = 優れたユーザー エクスペリエンス
TCP Session-2
Backend
instance
VM
TCP Session-1
TCP Session-2
Backend
instance Google’s high quality
global network
Internet
Load
Balancer
TCP Session-1
ISP
LB
ユーザー エクスペリエンスが予測不能 低レイテンシと優れたユーザー エクスペリエンス
Load
Balancing
従来型クラウドの負荷分散 Google Cloud のグローバル負荷分散
Google のグローバル負荷分散は、以下によってレイテンシを低減
● ユーザーの接続をユーザーに近い場所（最も近い POP）で終端
● プロキシされたトラフィックを、 LB からバックエンドに Google の高パフォーマンス バックボーン経由で送信
● LB からバックエンド インスタンスへの接続を再利用
● キャッシュ可能なコンテンツをエッジから提供
Datacenter Datacenter
Edge POP
?

22. Enterprise 向けクラウド
細かい粒度でのアクセス制御と相互接続 Virtual Private
Cloud, IAM(Identity and Access Management)
多層セキュリティ Customer Supplied Encryption Keys,
キー管理, テレメトリと監査機能, コンプライアンス認証,
Data Loss Prevention, Identity-Aware Proxy
OSSスタックのサポート: 自社管理 または Google管理
Lift and Shift: VM移行ツール, Windows/Linux OSSのサ
ポート
00 | Google Cloud Platform

23. 601
セキュリティ
エンジニアの数
600以上
セキュリティに関する
学術研究論文の数
発見されたCVEの数
700以上
Proprietary + Confidential
セキュリティとコンプライアンス

24. TitanGoogle’s purpose-built chip to
establish hardware root of trust for
both machines and peripherals on
cloud infrastructure

25. モダンアプリケーションの開発
Google App Engine 自動, フルマネージド, スケーラブル
PaaS, コンテナと統合
Firebase GCPと統合されたモバイルアプリ開発
Google Container Engine - コンテナをデプロイするため
の Kubernetes を実装する最速でも最も簡単な方法
Google Compute Engine 6000 種類以上のコンフィグを
持つ低レベルのコンピュートリソース
Apigee レガシーサービスを APIとして統合する
00 | Google Cloud Platform

26. Better software, faster.

27. 開発者は
コードを書くだけ

28. サーバレス & コンテナ
AppEngine Cloud FunctionsContainer Engine
Planet-scale
Platform-as-a-Service
Containerized app
management
Serverless apps,
Google infrastructure

29. “Our operations team
is Google.”

30. Cloud
Storage
App Engine
Memcache
BigQuery
Key-value RelationalNon-relationalObject Warehouse
フルマネージドのストレージ
および データベースサービス
Binary or
object data
Images, Media
serving, backups
Web/mobile
applications, gaming
Game state,
user sessions
Cloud
Datastore
Hierarchical,
mobile, web
User profiles,
Game State
Cloud
Bigtable
Heavy read +
write, events
AdTech,
Financial, IoT
Cloud
SQL
Web
frameworks
CMS,
eCommerce
Cloud
Spanner
RDBMS+scale,
HA, HTAP
Transactions,
Ad/Fin/MarTech
Enterprise Data
Warehouse
Analytics,
Dashboards
00 | Google Cloud Platform

31. データを価値に変換する
完全で統合されたデータおよび分析基盤 投入、スト
リーミングおよびリアルタイム分析、コラボレーション、
可視化、機械学習
フルマネージドの Hadoop および Spark
Hadoop/Spark プロジェクトのコストおよびオーバー
ヘッドの削減
BigQuery - 対話速度でのサーバーレス , no-ops デー
タ・ウェアハウス。従量課金および固定料金
Cloud Machine Learning Engine - フルマネージド
サービスとして提供される、業界をリードする
TensorFlow 学習アルゴリズム
00 | Google Cloud Platform

32. 2016
Google
Research
20082002 2004 2006 2010 2012 2014 2015
Open
Source
2005
Google
Cloud
Products BigQuery Pub/Sub Dataflow Bigtable ML
GFS
Map
Reduce
BigTable Dremel
Flume
Java Millwheel Tensorflow
Apache Beam
PubSub
15年以上、データの問題に向き合ってきた

33. プロダクトをマッピングすると
保存収集
BigQuery
(SQL)
処理 / 分析
Cloud
Dataflow
(stream
and batch)
Cloud
Storage
(objects)
Cloud
Datastore
(NoSQL)
BigQuery
Storage
(structured)
Cloud Dataproc (Hadoop & Ecosystem)
Cloud
Bigtable
(NoSQL
HBase)
Cassandra hBase MongoDBRabbit MQ Kafka
Cloud 2.0
Cloud 3.0
可視化
Cloud Datalab
(iPython/Jupyter)
Tableau
Cloud
Pub/Sub
Stackdriver
Logging
BQ
Streaming
App
Engine
Cloud
SQL
(SQL)
Cloud
Machine
Learning
Engine
Cloud
Spanner
(NewSQL)

34. リファレンスアーキテクチャ
生ログ、ファイル、外
部システムからのア
ウトプット 等
イベント、
メトリック等
GCPのシステムロ
グ、アプリケーション
ログ 等
Stream
Batch
Batch
外部
アプリケー
ション
Cloud Datalab
可視化および
BI
データ共有
B C
A
BigQuery
Dataproc
Dataflow
Cloud Storage
Pub/Sub
Stackdriver Logging
Data Studio

35. Google CEO, スンダー・ピチャイ
2016年度投資家向けの書簡より
モバイルファーストからAIファーストへ。
このことが全ての人の働き方を劇的に
変えられると、私たちは信じています。
We will move from mobile first to an AI first world.
We see huge opportunities to dramatically improve how people work.

36. Neural Network extracts features from data

37. Google Cloud における MLサービス
Custom ML models Pre-trained ML models
Vision API
Translation
API
Natural Language
API
Speech API
Machine Learning EngineTensorFlow
Jobs API

38. Scalability &
Automated Ops
100 million daily users
8 billion videos

39. Proprietary + Confidential
Google の HTTP(S) ロードバランス性能
0 150 300 450 600
1,600,000
複数リージョンをまたいで
(europe-west1-a, europe-west1-b, asia-east1-a)
RPS
時間 (秒)
1,200,000
800,000
400,000
0
秒間 130 万リクエスト
50 倍
実際のトラフィックは予想の
使用したサービス

40. User Experience
at Scale
“Company would have ceased
to exist without Google’s help”
Niantic CEO

41. 41
Google's global
network is one of the
strongest features for
choosing Google
Cloud.
Ravi Yeddula
Sr. Director Platform Architecture & Application
Development, The Home Depot
“

42. “物理マシンを所有して運用することは、我々に
とっては競争優位ではない “
Spotify
http://www.slideshare.net/JoshBaer/shortening-the-feedback-loop-big-data-spain-external

43. “我々はビッグデータ技術における Google の
先進性が、我々のデータ処理に優位をもたら
してくれると信じている”
Spotify
http://www.slideshare.net/JoshBaer/shortening-the-feedback-loop-big-data-spain-external

44. Questions?

45. Thank You!