NVIDIA LinkX InfiniBand와 이더넷의 소싱 및 호환성 매트릭스

구독하세요
빠른 테이크
NVIDIA Quantum-2(InfiniBand) 및 Spectrum-4(이더넷) 플랫폼에 적합한 물리 계층 인터커넥트를 조달하려면 폼팩터 열 설계(핀형 상단 OSFP 대 평면형 상단 OSFP) 및 트랜시버 변조 표준을 엄격하게 준수해야 합니다. 이 가이드는 ConnectX-7 및 BlueField-3 아키텍처 전반에 걸쳐 NVIDIA LinkX DAC 및 QSFP112 트랜시버에 대한 명확한 호환성 매트릭스를 제공하여 네트워크 엔지니어가 구축 병목 현상을 해결하고 조달 경로를 최적화할 수 있도록 지원합니다.

HGX H100 GPU 클러스터를 멀티노드로 긴급 배포하는 과정에서 물리 계층 링크 다운 오류만큼 작업 진행을 빠르게 중단시키는 것은 없습니다. 이때 고급 OSFP 트랜시버를 사용하면 문제를 해결할 수 있습니다. 퀀텀-2 QM9700 스위치 케이지에 연결하려고 시도했지만 호스트의 평면형 OSFP 요구 사항과 스위치의 핀형 상단 열 설계 간의 불일치로 인해 포트가 꺼진 상태로 유지되는 것을 알게 되었습니다. 또는 승인되지 않은 트랜시버를 사용하여 BlueField-3 DPU를 리프 스위치에 연결하려고 시도했는데, 순방향 오류 수정(FEC) 불일치로 인해 포트가 계속해서 불안정해지는 현상이 발생했습니다.

고성능 AI 패브릭에서 인터커넥트는 더 이상 수동적인 부속품이 아니라 실리콘의 핵심적인 확장 기능입니다. NVIDIA LinkX DAC 및 트랜시버 포트폴리오의 정확한 호환성 매트릭스를 이해하는 것은 비용이 많이 드는 물리 계층 문제 해결을 방지하고 프로젝트 납기를 준수하는 데 필수적입니다.

1. 물리 계층 아키텍처: 100G-PAM4 변조 및 폼 팩터 차이
2. 소싱 및 호환성 매트릭스: 인피니밴드와 이더넷 인터커넥트 비교
3. 실제 배포 및 CLI 진단: FEC 불일치 해결 및 DOM 모니터링
4. 전략적 조달: 리드 타임 단축 및 AI 클러스터 BOM 최적화
5. 사람들이 묻는 질문(FAQ)

물리 계층 아키텍처: 100G-PAM4 변조 및 폼 팩터 차이

현대 AI 워크로드는 막대한 이분법 대역폭을 요구하며, 이는 다음과 같은 변화를 촉발합니다. 50G-PAM4 (HDR 200G 및 초기 400G QSFP-DD 시스템에 사용됨) 100G-PAM4 레인별 신호 전송. 이러한 전환은 400Gb/s(4x100G) 및 800Gb/s(8x100G) 아키텍처 모두의 기반이 됩니다. 그러나 100G-PAM4 신호를 처리하는 과정에서 심각한 열 문제와 신호 무결성 문제가 발생하여 트랜시버 폼 팩터에 차이가 생깁니다.

OSFP 열분할: 핀형 상단 vs. 평면형 상단

기존 광 트랜시버와 달리 NVIDIA의 Quantum-2 InfiniBand 및 Spectrum-4 이더넷 스위치는 통합형 방열판이 없는 OSFP 케이지를 사용합니다. 대신, 열 방출 메커니즘이 트랜시버 자체에 직접 내장되어 있습니다.

  • 핀형 상단 OSFP: 이 모듈에는 커넥터 케이스 상단에 통합 냉각 핀이 있습니다. 이 핀은 공랭식 스위치(예: Quantum-2 QM9700 및 Spectrum-4 SN5600)에 필수적인데, 스위치가 트랜시버의 핀을 통해 섀시의 공기 흐름 경로로 열을 전달하기 때문입니다.
  • 평면형 OSFP: 이 모듈은 상단 표면이 매끄럽습니다. DGX H100 GPU 시스템이나 OSFP 기반 ConnectX-7 SmartNIC이 장착된 서버와 같은 호스트용으로 설계되었습니다. 이러한 호스트 시스템에는 OSFP 모듈의 평평한 표면에 직접 밀착되어 열을 방출하는 내부 방열판이 있습니다.

경고: 평면형 OSFP 모듈을 공랭식 스위치 케이지에 삽입하면 열 방출 부족으로 인해 급격한 열 폭주가 발생하여 몇 분 내에 포트가 자동으로 차단될 수 있습니다.

QSFP112 대안

OSFP가 스위치 간 링크 및 스위치-GPU 링크에서 지배적인 위치를 차지하고 있지만, QSFP112 트랜시버 이 표준은 고밀도 SmartNIC 및 DPU 구축에 매우 중요한 역할을 합니다. QSFP112는 기존 QSFP 폼 팩터를 유지하면서 전기 레인을 업그레이드하여 100G-PAM4를 지원합니다.

  • BlueField-3 DPU QSFP112, QSFP56, QSFP28 폼 팩터만 지원하며 OSFP는 지원하지 않습니다.
  • ConnectX-7 스마트NIC 이 제품은 OSFP 케이지형과 QSFP112 케이지형, 두 가지 물리적 변형으로 제조됩니다. 구매 담당 엔지니어는 케이블을 구매하기 전에 정확한 NIC SKU를 확인해야 합니다.

자세한 호스트 측 어댑터 사양은 폼 팩터 호환성을 확인하기 위해 ConnectX-7 SmartNIC 사양을 참조하십시오.

가격이나 재고 관련 문의 사항이 있으신가요?

재고를 확인하고, 옵션을 비교하거나, 저희 팀과 상담하세요.

소싱 및 호환성 매트릭스: InfiniBand와 이더넷 인터커넥트 비교

NVIDIA LinkX 케이블과 트랜시버는 InfiniBand 및 이더넷 프로토콜을 모두 지원하도록 설계되었지만, 물리적 형태와 광 분할 구성은 스위치 및 호스트 아키텍처에 따라 크게 다릅니다.

제품 유형 / SKU 폼 팩터(스위치/호스트) 최대 도달 범위 변조 및 프로토콜 전력 소비(일반) 주요 응용 프로그램
NDR 패시브 DAC OSFP(핀형)에서 OSFP(평면형)로 3.0 미터 100G-PAM4 (IB NDR / 400GbE) 0.1W(수동) Switch-to-ConnectX-7(OSFP) 또는 DGX H100
NDR 활성 구리(ACC) OSFP(핀형)에서 OSFP(평면형)로 5.0 미터 100G-PAM4 (IB NDR / 400GbE) 각 끝당 ~1.5W 중거리 랙 간 스위치-호스트 링크
QSFP112 패시브 DAC QSFP112 ~ QSFP112 2.0 미터 100G-PAM4 (400GbE / NDR200) 0.1W(수동) BlueField-3 DPU 또는 ConnectX-7(QSFP112)로 전환하십시오.
MMA4Z00-NS (SR8) OSFP(핀형) 트윈 포트 50미터(MMF) 2x400G (800G) PAM4 (IB/EN) 15 Watts 고밀도 Quantum-2/Spectrum-4 스위치 업링크
MMA1Z00-NS400 (SR4) QSFP112 단일 포트 100미터(MMF) 400G PAM4 (이더넷/NDR) ~8와트 BlueField-3 DPU와 리프 스위치 연결
MMS4X00-NS(DR8) OSFP(핀형) 트윈 포트 100미터(SMF) 2x400G (800G) PAM4 (IB/EN) 17 Watts 척추에서 잎까지 단일 모드 광학 분포

어댑터와 스위치 간의 토폴로지를 효과적으로 계획하려면 ConnectX-7 400G DAC 및 AOC 케이블링 가이드를 참조하여 검증된 브레이크아웃 구성을 확인하십시오.

실제 배포 및 CLI 진단: FEC 불일치 해결 및 DOM 모니터링

100G-PAM4 신호 방식에서는 허용 가능한 비트 오류율(BER)을 유지하기 위해 순방향 오류 정정(FEC)이 필수적입니다. 하지만 NVIDIA Onyx/MLNX-OS, Cumulus Linux, SONiC 등 운영 체제에 따라 기본 FEC 상태가 다를 수 있습니다. Spectrum-4 스위치 포트와 BlueField-3 DPU 간의 FEC 상태 불일치는 링크 트레이닝을 방해하여 "링크 다운" 또는 "포트 플래핑" 상태를 지속시킬 수 있습니다.

다음은 NVIDIA Onyx(MLNX-OS) 스위치의 트랜시버 링크 문제를 진단하고 해결하기 위한 복사 붙여넣기 가능한 CLI 구성 및 진단 스크립트입니다.

# 1단계: 관리자 권한 구성 모드로 진입 가능 터미널 구성 # 2단계: 물리적 송수신기 상태 및 DOM 원격 측정 데이터를 검사합니다. 인터페이스 이더넷 1/1 트랜시버 상세 정보를 표시합니다. # 3단계: 현재 링크 상태 및 협상된 FEC 매개변수를 확인합니다. 이더넷 1/1 인터페이스를 표시합니다. # 4단계: 링크가 다운되었거나 불안정한 경우, 리드-솔로몬(RS) FEC를 수동으로 적용합니다. 이더넷 인터페이스 1/1 fec rs # 5단계: 송수신기가 공식 NVIDIA LinkX 모듈로 인식되는지 확인합니다. 재고 표시 # 6단계: 실행 중인 구성을 비휘발성 메모리에 저장합니다. 쓰기 메모리

BlueField-3 DPU를 기본 이더넷 모드로 배포하는 경우 호스트 측 드라이버가 스위치의 FEC 구성과 일치하는지 확인해야 합니다. 하드웨어 프로비저닝에 대한 자세한 내용은 NVIDIA BlueField-3 DPU 소싱 문서를 참조하십시오.

전략적 조달: 리드 타임 단축 및 AI 클러스터 BOM 최적화

AI 데이터 센터 구축에는 촉박한 일정이 수반됩니다. 기존 유통 채널에서는 고속 광 인터커넥트 공급에 보통 6~8주의 납기가 소요되는데, 이는 수백만 달러 규모의 GPU 구축을 지연시키고 프로젝트 지연에 따른 위약금을 초래할 수 있습니다.

라우터-스위치는 고도로 최적화된 조달 모델을 통해 이러한 공급망 병목 현상을 해결합니다.

  • 즉각적인 가용성: Router-switch는 전 세계 창고에 20천만 달러 이상의 재고를 확보하여 미국, 싱가포르, 일본 등 주요 시장에 당일 배송을 가능하게 합니다. 이를 통해 NVIDIA LinkX DAC 케이블 및 QSFP112 트랜시버와 같은 핵심 부품의 리드 타임을 획기적으로 단축할 수 있습니다.
  • BOM 최적화: 당사의 직송 공급망은 여러 단계의 지역 유통업체 마진을 없애 시스템 통합업체와 기업 고객이 대량 구매 시 경쟁력 있는 가격을 확보할 수 있도록 합니다.
  • 진위성 보장: 출고되는 모든 NVIDIA LinkX 케이블과 트랜시버는 100% 정품임을 보장하며, 시리얼 번호는 출고 전 공식 공급업체 데이터베이스에서 완벽하게 확인할 수 있습니다.
  • 종합적인 지원 및 보증: 배포 후 발생할 수 있는 위험을 최소화하기 위해 Router-switch는 CCIE 수준의 1:1 기술 컨설팅을 무료로 제공하며, 3년 무상 RS Care 연장 보증도 함께 제공합니다. 이 보증에는 운영 환경에서 평균 수리 시간(MTTR)을 최소화하기 위한 신속한 RMA 대기 교체 서비스가 포함됩니다.

사람들은 또한 질문합니다(FAQ)

Q1 NVIDIA Quantum-2 InfiniBand 스위치에서 플랫탑 OSFP 트랜시버를 사용할 수 있습니까?
아니요. NVIDIA Quantum-2(및 Spectrum-4) 스위치는 공랭식이며 OSFP 케이지에 내부 방열판이 없습니다. 열을 발산하기 위해 핀이 있는 OSFP 트랜시버 또는 DAC가 필요합니다. 이러한 스위치에 평평한 상단 OSFP 모듈을 사용하면 트랜시버가 빠르게 과열되어 작동이 중단될 수 있습니다. 평평한 상단 OSFP 모듈은 호스트 측 어댑터(예: ConnectX-7) 또는 통합 냉각 메커니즘을 갖춘 수랭식 스위치용으로만 설계되었습니다.
Q2 400G 구축 환경에서 QSFP-DD와 QSFP112의 차이점은 무엇입니까?
주요 차이점은 전기 레인 구성 및 변조 방식에 있습니다. QSFP-DD(이중 밀도)는 50G-PAM4로 동작하는 8개의 전기 레인을 사용하여 400G를 구현합니다. QSFP112는 100G-PAM4로 동작하는 4개의 전기 레인을 사용하여 400G를 구현합니다. QSFP112는 ConnectX-7, BlueField-3 및 Quantum-2/Spectrum-4 시스템의 기본 100G 레인 아키텍처와 일치하므로 트랜시버 내부에 복잡한 기어박스가 필요 없어 지연 시간과 전력 소비를 줄입니다.
Q3 NVIDIA LinkX 케이블은 InfiniBand 및 이더넷 프로토콜 모두와 호환됩니까?
예. NVIDIA LinkX 구리 케이블(DAC 및 ACC)과 광 트랜시버는 물리 계층에서 프로토콜에 구애받지 않습니다. 기본 하드웨어(SmartNIC, DPU 또는 스위치)와 펌웨어가 해당 프로토콜에 맞게 구성되어 있으면 InfiniBand 및 이더넷 프로토콜을 모두 지원합니다. 예를 들어, ConnectX-7 카드는 동일한 LinkX DAC를 통해 InfiniBand NDR 또는 400GbE를 실행할 수 있습니다.
Q4 ConnectX-7 어댑터와 Spectrum 스위치 간의 포트 플래핑 문제를 어떻게 해결해야 하나요?
400G에서 포트 플래핑 현상은 대부분 FEC(Forward Error Correction) 설정 불일치 또는 신호 무결성 저하로 인해 발생합니다. 먼저 스위치 CLI를 사용하여 링크 양쪽 끝에서 FEC가 Reed-Solomon(RS-FEC)으로 설정되어 있는지 확인하십시오. 다음으로 DOM(Digital Optical Monitoring) 값을 확인하여 광 수신 전력(Rx)이 허용 가능한 임계값(일반적으로 싱글모드의 경우 -2dBm ~ -8dBm) 내에 있는지 확인하십시오. 패시브 DAC를 사용하는 경우 OSFP 케이블은 3미터, QSFP112 케이블은 2미터를 초과하지 않도록 하십시오.