Rakuten Developer Meetup vol.03 大規模クラウドの仕組みと秘密 https://rakuten.connpass.com/event/254762/

1. 楽天サービスを支えるネットワークインフラストラクチャー
Sep. 29th , 2022
Kazuyuki Uba
Network Section
Infrastructure Services Department
Rakuten Group, Inc.

2. 2
About Me
2015年７月 ネットワークエンジニアとして中途入社
40Gbps – 100Gbps 広帯域・低遅延 ビッグデータシステム
専用のネットワーク設計・構築・保守運用を経験
現在はネットワークセクションにてグループマネージャーとして
楽天サービスを支えるデータセンターネットワーク設計・構築・
運用保守に携わる。
趣味 : スキー (学生時代にSAJ1級を取得)
Kazuyuki Uba (伯母 和之 )
ネットワーク課
ネットワークリライアビリティグループ
マネージャー

3. 3
CONTENTS
1. 持続可能なネットワークインフラストラクチャー
2. 楽天ネットワークインフラストラクチャー業務に携わる魅力

4. 4
CONTENTS
1. 持続可能なネットワークインフラストラクチャー
2. 楽天ネットワークインフラストラクチャー業務に携わる魅力

5. 5
Backbone Group
Data Center Networking
Data Center
Interconnect
ネットワーク課
Network Reliability Group
ネットワーク課
持続可能なネットワークインフラストラクチャー

6. 6
Rakuten Ecosystem
Rakuten Infrastructure as a Service
ネットワークインフラストラクチャー
Internet
Connection
Public Cloud
Global Connection
Rakuten Network
ACTIVE-ACTIVE 構成

7. 7
Super Spine Super Spine
Border
Leaf Switch
Border
Leaf Switch
Border
Leaf Switch
Border
Leaf Switch
Spine
Switch
Spine
Switch
Spine
Switch
Spine
Switch
Spine
Switch
Spine
Switch
Spine
Switch
Spine
Switch
Top of rack
Switch
Top of rack
Switch
Top of rack
Switch
Top of rack
Switch
Top of rack
Switch
Top of rack
Switch
Top of rack
Switch
Top of rack
Switch
FRR ルーティングオンホストによって BGP レイヤー３接続をサーバでも有効にしています。
Border Gateway Protocol
Data Center Interconnect
BGP BGP
BGP BGP BGP BGP
BGP
BGP
現在のインターネットにおいて、複数の独立し
たネットワークを接続したTCP/IPネットワーク
において、ネットワーク間の経路情報を通信機
器間で交換する手順を定めたプロトコル（通信
規約）の一つ。
データセンターネットワーク

8. 8
Internet Public Cloud Global Network
EU/US
データセンターインターコネクト（バックボーンネットワーク）
Data Center Data Center Data Center Data Center
• 100Gbps のネットワークリンク
にて冗長化を実現
• 例え回線がダウンしても当社サー
ビスは運用稼働可能
Data Center
Interconnect

9. 9
プライベートクラウドプラットフォーム概要
DC-1 DC-2 DC-3 DC-4 DC-5
Backbone Network/DCI
Network
Baremetal
Controller
Network
Controller
Baremetal
LBaaS
GUI Portal + API + IAM + Billing
DBaaS Storage
CaaS Monitoring
Service-B Service-B
Service-C
Service-B
Service-B
Service-A
• マルチテナントベースの管理
• 社内の頻繁な組織再編や柔軟な権限設定に対応
• 明瞭な課金表示
認証+認可+ポータルを自社用に開発
• ベアメタルサーバをセルフサービスで提供
• ユーザニーズに合わせた多様なサーバカタログ
• シンプルで安定したネットワーク
ベアメタルを起点としたインフラ基盤
• 広帯域/高信頼のネットワークで複数リージョン間を接続
• 1 DC がダウンしてもサービスを継続可能 (BCP)
マルチリージョン対応

10. 10
US EU
国内外合わせて 9 箇所の
データセンター が稼働
JP
3 ２ 4

11. 11
CONTENTS
1. 持続可能なネットワークインフラストラクチャー
2. 楽天ネットワークインフラストラクチャー業務に携わる魅力

12. 12
楽天ネットワークインフラストラクチャー業務に携わる魅力
• ネットワーク課メンバーでインフラストラクチャーを創造することができる
• 自ら主体となりネットワークの設計・導入・保守に能動的に参画することが可能
• 楽天サービスを大規模なネットワークインフラストラクチャー基盤から支えている
• ネットワーク技術を駆使し、より良いソーシャルプラットフォームを提供できる
グローバルなインフラ
主体的な組織
大規模ネットワーク
• 日本国内ネットワークだけではなく、ヨーロッパ及びアメリカのグローバル
ネットワークに携わるチャンスがある
• 世界各国のメンバーと共に協業し、業務を行うことができる

13. 13
ネットワーク課のチーム編成
Boston Office
Paris Office
Rakuten India
Bangalore
Rakuten
Crimson House
Rakuten
Crimson House West
JAPAN INDIA PARIS BOSTON
20 9 2 3