Home Data Center Interconnect (DCI): Dark Fiber, DWDM และ OTV Data Center Interconnect (DCI): Dark Fiber, DWDM และ OTV
Data Center Interconnect (DCI): Dark Fiber, DWDM และ OTV
Data Center Interconnect (DCI) คือ technology ที่เชื่อมต่อ data centers หลายแห่งเข้าด้วยกันสำหรับ disaster recovery, workload mobility และ active-active operations Dark Fiber ให้ dedicated optical connectivity, DWDM (Dense Wavelength Division Multiplexing) เพิ่ม capacity บน fiber เดียวด้วยหลาย wavelengths และ OTV (Overlay Transport Virtualization) ขยาย Layer 2 domain ข้าม WAN อย่างปลอดภัย
องค์กรที่มี single data center เสี่ยงต่อ total outage จาก natural disaster, power failure หรือ hardware failure DCI ทำให้มี multi-DC redundancy: replicate data + services ข้าม sites, VM migration สำหรับ maintenance windows และ active-active load distribution สำหรับ performance
DCI Transport Options
Transport
Distance
Bandwidth
Latency
Cost
Dark Fiber
Metro (< 80km typical)
Very high (100G-400G per wavelength)
Ultra-low (speed of light)
High capex, low opex
DWDM
Metro to long-haul (1000s km)
Very high (Tbps aggregate)
Low (optical)
High (equipment)
MPLS
Any (ISP network)
Up to 100G
Low-medium
Medium (recurring)
Internet VPN (IPsec)
Any
Variable
Variable (best-effort)
Low
Cloud Interconnect
Any (AWS DX, Azure ER)
Up to 100G
Low
Medium-high
Dark Fiber
Feature
รายละเอียด
คืออะไร
Unlit fiber optic cable — เช่าเปล่าแล้วใส่ optics เอง
Control
Full control ของ bandwidth, protocol, encryption
Capacity
ใส่ DWDM optics → หลาย wavelengths × 100G-400G per wavelength
Latency
~5 μs/km (speed of light in fiber) — lowest possible
Cost Model
IRU (Indefeasible Right of Use) 10-20 years หรือ monthly lease
Risk
Fiber cut = outage (ต้อง diverse path / backup)
Use Case
Metro DCI (< 80km), high-frequency trading, storage replication
DWDM
Feature
รายละเอียด
คืออะไร
Multiplex หลาย wavelengths (colors) บน fiber เดียว
Channels
40-96 channels per fiber (C-band), expandable to L-band
Per Channel
100G, 200G, 400G per wavelength (coherent optics)
Aggregate
ถึง 10s of Tbps per fiber pair
Amplifiers
EDFA (Erbium Doped Fiber Amplifier) ทุก 80-120km
ROADM
Reconfigurable Optical Add-Drop Mux → dynamic wavelength routing
Coherent Optics
Digital signal processing → higher capacity + longer distance
OTV (Overlay Transport Virtualization)
Feature
รายละเอียด
คืออะไร
Cisco technology ที่ extend L2 domain ข้าม L3 WAN (MAC-in-IP encapsulation)
Problem Solved
VM migration ต้อง same VLAN → ต้อง stretch L2 ข้าม sites
Encapsulation
MAC-in-IP/GRE — encapsulate L2 frames ใน IP packets
STP Isolation
OTV ไม่ forward STP BPDUs → STP domain แยกกันแต่ละ site (safe!)
ARP Optimization
Cache ARP locally → ลด ARP broadcast ข้าม WAN
Multi-homing
Multiple OTV edge devices per site (redundancy)
Platform
Cisco Nexus 7000/9000
L2 Extension Technologies
Technology
Encapsulation
STP Isolation
Platform
OTV
MAC-in-IP/GRE
Yes (no BPDUs across)
Cisco Nexus
VXLAN EVPN
MAC-in-UDP (VXLAN)
Yes (BGP EVPN control plane)
Multi-vendor
VPLS
MPLS pseudowire
No (STP extends)
SP routers
Dark Fiber + trunk
Native Ethernet
No (STP extends — risky!)
Any switch
DCI Design Models
Model
Description
Use Case
Active-Passive (DR)
Primary DC active, DR site standby → failover on disaster
Cost-effective DR, RPO/RTO hours
Active-Active (stretched)
Both DCs serve traffic → stretched L2 + GSLB
High availability, RPO/RTO near-zero
Active-Active (independent)
Both DCs independent → data replicated → GSLB routes traffic
Best practice (no L2 stretch risk)
Storage Replication
Type
RPO
Distance
Impact
Synchronous
0 (zero data loss)
< 100km (latency dependent)
Write latency increases (wait for ack)
Asynchronous
Seconds-minutes
Any distance
Minimal write latency impact
Semi-synchronous
Near-zero
< 300km
Moderate impact
Best Practices
Practice
รายละเอียด
Diverse fiber paths
ใช้ fiber จาก 2 providers / 2 paths (fiber cut protection)
Avoid L2 stretch ถ้าเป็นไปได้
Active-active independent (L3 only) ดีกว่า stretched L2
ถ้าต้อง L2 stretch → ใช้ OTV/VXLAN
อย่า trunk native Ethernet ข้าม WAN (STP risk)
Encryption
MACsec (L2) หรือ IPsec (L3) สำหรับ DCI traffic
Monitor latency
DCI latency affects sync replication + application performance
Test DR regularly
Failover test ทุก quarter (อย่ารอจน disaster จริง)
ทิ้งท้าย: DCI = Connect Data Centers Reliably
DCI Dark Fiber = lowest latency, full control (metro < 80km) DWDM = multiply fiber capacity (40-96 wavelengths × 100-400G) OTV/VXLAN EVPN = safe L2 extension (STP isolated) Active-active independent (L3) > stretched L2 (less risk) Sync replication (RPO=0) < 100km, async for longer distances Diverse fiber paths + encryption + regular DR testing
อ่านเพิ่มเติมเกี่ยวกับ EVPN-VXLAN Fabric และ MPLS Fundamentals ที่ siamlancard.com หรือจาก icafeforex.com และ siam2r.com
