วันพฤหัสบดีที่ 21 มีนาคม พ.ศ. 2562

Cisco ACI Multi-Site Designs (Part 2) - Stretched Fabric Design

Cisco ACI Multi-Site Designs (Part 2) - Stretched Fabric Design

ในตอนที่ 2 จะกล่าวถึงการ Design แบบ Stretched Fabric ซึ่งสามารถอ่านในตอนที่ 1 ตามลิงค์ด้านล่างครับ
Cisco ACI Multi-Site Designs (Part1)


Stretched Fabric Design

Cisco ACI แบบ Stretched fabric คือการเชื่อมต่อแบบ Partial Mesh หรือ Full Mesh ระหว่าง Leaf และ Spine ที่อยู่คนละ Location กัน ให้ทั้ง 2 Sites มองเห็นเป็น Fabric เดียวกัน (Single Fabric) เราสามารถจัดการอุปกรณ์ทั้ง 2 Sites ด้วย APIC Controller ชุดเดียวกัน

Stretched Fabric จะ manage โดยใช้ APIC Cluster ชุดเดียว (Single APIC Cluster) โดยจะประกอบด้วย APIC Controller ทั้งหมด 3 ตัว

  • 2 APICs ติดตั้งที่ไซต์นึง
  • 1 APIC ติดตั้งที่อีกไซต์นึง

APIC Cluster จะทำการเชื่อมทั้ง 2 ไซต์ โดยสามารถแชร์ Endpoint Database Synchronized และแชร์ control plane (IS-IS , COOP และ MP-BGP) เพราะมันจะมองเป็น Fabric เดียวกัน

ปัจจุบัน Cisco ACI รองรับการทำ Stretched Fabric ได้สูงสุด 3 ไซต์ แต่ว่าจะต้องมีอย่างน้อย 2 Leafs ในแต่ละ Location ที่ต้องออกแบบเป็น Transit Leafs โดยมีจุดประสงค์เพื่อให้แต่ละไซต์สามารถเชื่อมต่อถึงกัน โดยที่ไม่จำเป็นต้องต่อแบบ Full Mesh 

โดย Transit Leaf จะเชื่อมต่อกับ Spine ไม่มีความต้องการใดๆเพิ่มเติมสำหรับการเชื่อมต่อ Transit Leaf กับ Spine ระหว่างไซต์

ถ้าเกิดการเชื่อมต่อระหว่างไซต์มีปัญหา หรือ bandwidth ถูกจำกัด จะสามารถ prefer ผ่าน WAN Link ในแต่ละไซต์ ซึ่งตัว Transit Leaf จะต้องทำหน้าที่เป็น Border Leaf ด้วย เพื่อเชื่อมต่อไปหา WAN และตาม Best Practice ก็ควรแยกระหว่าง Transit Leaf กับ Border Leaf ออกจากกัน




Site-to-Site Connectivity Options

ในการเชื่อมต่อระหว่าง Site สำหรับที่มีการออกแบบเป็น Stretched Fabric มีการเชื่อมต่อที่รองรับ ดังนี้
  • Dark Fiber 40G - 40Km
Cisco QSFP
Cable Distance
QSFP-40G-LR4
10 km
QSFP-40GE-LR4
10 km
QSFP-40GLR4L
2 km
QSFP-40G-ER4
30 km
Note   
Starting with ACI release 1.1, QSFP-40G-ER4 supports a distance of 40KM.
  • DWDM 40G - 800Km

  • EoMPLS 10G/40G/100G - 800Km

    สำหรับ EoMPLS ที่มี Low-Speed ควรจะต้องมีการทำ QoS Policy สำหรับ critical control traffic เช่น traffic ที่คุยกันระหว่าง APIC Cluster Controller หรือ traffic control protocol (IS-IS , MP-BGP) ให้เป็น Priority Queue.


ซึ่งทุกการเชื่อมต่อ ต้องการ Round Trip Time (RTT) 10ms


ติดตามต่อในตอน 3 เรื่อง Failure Scenario ของ Stretched Fabric >>>

--------------------------------------------------------------------------------------------------------------------------

English Mode

In part 2 will mention for Stretched Fabric design, you can read in part 1 follow by below link
Cisco ACI Multi-Site Designs (Part1)


Stretched Fabric Design

A Cisco ACI stretched fabric is a partially meshed or fully meshed design that connects Cisco ACI leaf and spine switches distributed in separate geographic locations. The stretched fabric is functionally a single Cisco ACI fabric. The interconnected sites are one administrative domain and 
one availability zone with shared fabric control planes (using Intermediate System to Intermediate 
System [IS-IS] protocol, Cooperative Key Server Protocol [COOP], and Multiprotocol Border Gateway Protocol [MP-BGP]).

Administrators can manage the sites as one entity; configuration changes made on any APIC node are applied to devices across the sites.

The stretched fabric is managed by a single APIC cluster, consisting of three Application Policy 
Infrastructure Controllers (APICs), with two APICs deployed at one site and the third deployed at 
the other site. The use of a single APIC cluster stretched across both sites, a shared endpoint 
database synchronized between spines at both sites, and a shared control plane (IS-IS, COOP, and 
MP-BGP) defines and characterizes a Cisco ACI stretched fabric deployment.



At least two leafs at each location will be designated as transit leafs, the purpose of which is to provide connectivity between the locations. The transit leafs allow the sites to be connected to each other without requiring a full mesh.

Transit leaf refers to the leaf switches that provide connectivity between two sites. Transit leaf switches connect to spine switches on both sites. There are no special requirements and no additional configurations required for transit leaf switches. Any leaf switch can be used as transit leaf. At least one transit leaf switch must be provisioned for each site for redundancy reasons.

When bandwidth between sites is limited, it is preferable to have WAN connectivity at each site. While any leaf can be a transit leaf and a transit leaf can also be a border leaf (as well as provide connectivity for compute or service appliance resources), it is best to separate transit and border leaf functions on separate switches



Site-to-Site Connectivity Options

ACI stretched fabric site-to-site connectivity options include dark fiber, dense wavelength 
division multiplexing (DWDM), and Ethernet over MPLS (EoMPLS) pseudowire. The following media types, speeds, and distances are supported:
  • Dark fiber 40G/40km
Cisco QSFP
Cable Distance
QSFP-40G-LR4
10 km
QSFP-40GE-LR4
10 km
QSFP-40GLR4L
2 km
QSFP-40G-ER4
30 km
Note   
Starting with ACI release 1.1, QSFP-40G-ER4 supports a distance of 40KM.
  • DWDM 40G/800km

  • EoMPLS 10G/40G/100G/800km

All configurations require 10ms round trip time (RTT).


To be continued. >>


Reference : https://www.cisco.com/c/en/us/td/docs/switches/datacenter/aci/apic/sw/kb/b_kb-aci-stretched-fabric.html

1 ความคิดเห็น: