Contenu connexe
Similaire à 楽天ネットワークエンジニアたちが目指す、次世代データセンターとは (20)
Plus de Rakuten Group, Inc. (20)
楽天ネットワークエンジニアたちが目指す、次世代データセンターとは
- 12. 12
Spine01
Leaf01 Leaf02 Leaf03 Leaf04 Leaf05
Spine02
MP-BGP EVPN & VXLAN
VTEP VTEP VTEP VTEP VTEP
RR RR
特徴
コントロールプレーンとデータプレーンの分離
MP-BGPでMACとIPを広報
Good
L2/L3接続提供可能
容易なトラフィック移行 (BGP AS-prependなど)
高速な経路収束
全ACT-ACT構成
MPLSよりもシンプル、低コスト
Bad
トラフィックエンジニアリングやQOS非サポート
パケットをカプセル化のオーバヘッド
- 13. 13
Edge1A Edge1B Edge2A Edge2B
Edge3A Edge3B Edge4A Edge4B Edge5A Edge5B
Site1 Site2
Site3 Site4 Site5
L2
L3
L2
L3
L3 L2
L3
L2
L3
L3
- 17. 17
2月
• 一部オペレーションにてバグが生じ、運用自動化延期
3月
• OSアップグレード (IPv6化)を試みるもバグに遭遇し失敗
6月
• LAB環境向け機器購入、環境構築、バグ検証
• 国内全DC、POPへホワイトボックススイッチ導入
7月
• OSアップグレード (IPv6化、運用自動化) 成功
8月
• インターネット向けトラフィック移行成功
12月~
• ダークファイバー等を活用し、国内全DCI100G化
• 海外拠点DCIへホワイトボックススイッチ導入検討
- 23. 23
L3
L3
L3 L3 L3
L3 L3
L3
POD1
L3 L3 L3 L3
L3 L3
POD2
BGP area
Broadcast
Domain
特徴
East-Westトラフィック向け (DC内サーバ間)
BGPベースのL3ネットワーク
L3等コストバランシング
業界標準プロトコルを使用
Good
安定性とスケーラビリティ
高速な経路収束
効率的な全ACT-ACTパス(非ブロードキャスト)
Bad
MLAG構成がなお存在
非効率的なIPアドレッシングが発生 (ラック毎)
IP Fabric
- 25. 25
L3 L3 L3 L3
L3 L3
BGP area
Pure IP Fabric
L3 L3
特徴
BGPベースの全L3ネットワーク
ホスト上にルーティング機能追加
L2の問題が発生しない (MLAG関連)
ToRのメンテナンス作業が容易
ホストから/32プレフィックスで広報
トレードオフ
サーバ初期構築が困難
L2接続サポート不可
ルーティングソフトウェアのインストール必須
(3rd Partyアプライアンスなどは不可)
Border Leaf
Spine
Leaf (ToR) L3 L3
L3L3L3L3L3L3
- 29. 29
トランシーバ 距離 主な用途 ケーブル
100G LR4 10km 長距離DC間、フロア間 OS* LC-LC
100G DAC - 5m ラック内 -
100G SR4 50 - 100m ラック内 OM* MPO
- 30. 30
トランシーバ 距離 主な用途 ケーブル
100G LR4 10km 長距離DC間、フロア間 OS* LC-LC
100G DAC - 5m ラック内 -
100G SR4 50 - 100m ラック内 OM* MPO
100G CWDM4 2km 短距離DC間、フロア間 OS* LC-LC
100G CWDM4 Lite 500m フロア間、ラック間 OS* LC-LC
- 31. 31
用途 トランシーバ ケーブル
ラック内 100G DAC -
ラック間 100G CWDM4 Lite OS* LC-LC
フロア間 100G CWDM4 Lite OS* LC-LC
用途 トランシーバ ケーブル
ラック内 100G DAC -
ラック間 100G SR4 OM* MPO
フロア間 100G CWDM4 Lite OS* LC-LC
VS
100G CWDM4 Lite
• 大規模データセンタ向け
• LC-LCケーブルの方が配線が楽
100G SR4
• 小規模データセンタ向け
• トランシーバのみの価格比較は断然有利
パターン1 パターン2
パターン2を採用