Fabric Extender의 2번째 정리입니다.
지난 주부터 포스팅 주제를 좀 다양하게 하려다보니 기존 NX-OS 정리도 포스팅 텀이 생기지 않을까 싶네요. ^^;
(사실 기반 지식도 바닥(?)이 나는 것이기 때문이겠지만요. ^^;)
다음 NX-OS 포스팅은... Fabric Extender 3이 될지.. FabricPath를 이어서 할지.. ^^ 아직은 미정이지만..
곧 다시 또 올리도록 하겠습니다.
FEX 구성 방법
• Nexus 2000은 개별 Port에 Pinning을 하는 방법과 Port-Channel을 사용하는 2가지 Load-Balancing 방법이 있다
• Static Pinning
- Front-panel Port와 Uplink를 직접 구성하는 방법
- Uplink의 구성 가능한 수를 기반으로 Pinning을 구성할 수 있다.
- 모든 Host Interface는 하나의 Uplink에 할당이 되어야 한다.
- pinning max-links 명령을 통해서 각 Host Interface와 구성하는 Uplink의 수를 지정할 수 있다. [max-link : 1 ~ 4]
- Bandwidth와 Oversubscription를 제어하는 데 있어서 좋은 구성 모드이다.
- Uplink가 Down 경우에 Down된 Link에서 사용 가능한 Link로 자동 전환되지 않으며,
삭제된 Uplink를 다시 추가하는 경우에도 재할당이 순서대로 되지는 않기 때문에 통신 상에 문제가 발생 할 수 있게 된다.
- 재할당을 위해 Down된 Uplink(Parent Switch Interface)에서 ‘no fex associate fex_no’로 fex연결을 해제해주어야 한다
- Fex 2148-T, 2148TP의 경우에는 1~4개의 Upstream Fabric Interface를 사용하며,
Fex 2224TP는 1~2개의 Fabric Interface, Fex 2232PP는 1~8개의 Fabric Interface를 지원한다.
- 해당 FEX와 연결된 Front-panel Port 확인 : show interface ethernet 1/17 fex-intf
• Ether-channel
- Uplink Port가 하나의 논리적인 Interface로 구성(Port-channel)되어서, 모든 Front-panel port가 Mapping 된다.
- Uplink가 추가되거나 삭제될 때에도 Host Port는 그대로 Up 상태를 유지할 수 있다.
- 모든 Traffic은 L2/L3 정보에 따라 Hash되어 Load Balancing되며, 하나의 Uplink가 Fail된 경우에는 나머지 Link로 계속
Load Balancing된다.
- Host Interface에 대해서 L2 / L3 모두 각각 Standard Mode일 때에는 최대 8개 Interface, LACP Mode일 때에는 최대 16개의
Interface를 묶어서 구성할 수 있다
- vPC를 이용하여 Uplink Port-channel을 구성할 수 있다.
FEX Static / Port Channel 차이
• Static과 PortChannel의 차이를 이해하기 위해서는 Fabric Extender에 대한 컨셉의 기본 구조에 대해서 이해해야 한다.
1. Fabric Extender는 중앙 Supervisor에 Line card를 연결하는 것과 유사한 방법이다.
2. Fabric Extender는 Local Switching을 하지 않고, 모든 Switching이 Supervisor에서 발생하게 된다.
• Static Pinning을 사용하는 경우에는 혼잡에 의해 영향을 받는 Server Port에 대해서 제어를 더 잘할 수 있다.
Port Channel은 Traffic이 Hash에 의해서 Uplink로 보내지기 때문에 제어가 불가능하고,
그래서 혼잡에 의해서 Host에 영향을 어떻게 받을지에 대해서 예측이 어렵다.
• Static Pinning은 Host별로 직접 Port 지정이 가능하기 때문에 사용량에 따라 혼잡이 발생하지 않도록 Port 구성을 분배할 수 있으나,
PortChannel의 경우에는 Hash 함수에 의해 자동지정이기 때문에 Port 구성 분배를 지정할 수 없기 때문에 특정 Port에 혼잡이 발생
하면서 다른 Port는 여유대역폭이 남을 수 있다.
• Static Pinning의 경우에는 Fabric Link중에 하나가 문제가 발생할 경우를 대비하기 위해서, Host 단에서 이중화(NIC Teaming같은)를
해두어야 하지만, Port-channel은 Fabric Link중에 하나가 문제가 발생하더라도 나머지 Link로 전송이 가능하기 때문에 별도의 Host단
이중화를 하지 않더라도 통신이 가능하다.
* Host단을 이중화로 구성한 경우, 상단 Static Pinning된 Uplink Down 시에 해당 Host Interface가 Down되어 Host단의 Fail-over가
된다.
FEX 구성 Topology
Enhanced Virtual PortChannel
• NX-OS 5.2(1)부터 Fabric Extender에서 host vPC를 서로 다른 FEX를 통해 vPC 설정이 가능하다.
• Enhanced vPC로 Host에서 FEX로 FEX에서 Nexus 5500으로의 모든 구간을 Active 구간으로 만들어서,
사용 가능한 Bandwidth를 효율화 한다.
• 지원 가능 플랫폼 (NX-OS 5.1.(3)N1(1))
- Nexus 5548P / 5548UP / 5596UP (지원)
- Nexus 5010 / 5020 (지원 불가)
•Single Homed 구성은 Host가 802.3ad(LACP) 지원 가능 시, Dual-Homed는 802.3ad(LACP) 지원 불가능 시에 A/S 구조로 사용한다
