เนื่องจากศูนย์ข้อมูลสมัยใหม่ยังคงเปลี่ยนไปใช้สถาปัตยกรรม Spine-Leaf 100G/25G อย่างต่อเนื่อง แพลตฟอร์มสวิตช์แบบดั้งเดิม เช่น Nexus 3K และ 5K จึงเริ่มประสบปัญหาในการรับมือกับปริมาณการรับส่งข้อมูลระหว่างทิศตะวันออกและทิศตะวันตก รวมถึงข้อจำกัดของลิงก์อัปโหลด การเปลี่ยนแปลงนี้ทำให้ Cisco Nexus N9K-C93180YC-FX3 กลายเป็นตัวเลือกที่ได้รับความนิยมอย่างกว้างขวางสำหรับบทบาท Leaf และ Spine ที่มีความหนาแน่นสูงในสภาพแวดล้อมระดับองค์กรและคลาวด์
อย่างไรก็ตาม วิศวกรผู้มีประสบการณ์เข้าใจถึงความเป็นจริงที่สำคัญประการหนึ่ง นั่นคือ การติดตั้งฮาร์ดแวร์เพียงอย่างเดียวไม่ได้รับประกันความพร้อมสำหรับการใช้งานจริง การใช้งานที่ประสบความสำเร็จขึ้นอยู่กับการวางแผนอย่างเป็นระบบ ตั้งแต่การติดตั้งทางกายภาพ การเริ่มต้นระบบ และที่สำคัญที่สุดคือ การตรวจสอบความเข้ากันได้ก่อนการใช้งานจริง
คู่มือนี้จะอธิบายขั้นตอนการติดตั้งทั้งหมด ตั้งแต่การติดตั้งบนแร็ค การกำหนดค่า NX-OS ไปจนถึงการเตรียมความพร้อมของโครงสร้างพื้นฐานในระยะเริ่มต้น
ข้อกำหนดเบื้องต้นในการติดตั้ง: ความพร้อมทางด้านวิศวกรรมก่อนการติดตั้ง
ก่อนติดตั้งสวิตช์ลงในสภาพแวดล้อมการใช้งานจริง ต้องตรวจสอบความถูกต้องของโครงสร้างพื้นฐานและข้อสมมติฐานด้านการออกแบบทั้งหมด เพื่อหลีกเลี่ยงความล่าช้าในการติดตั้งใช้งานในขั้นตอนต่อไป
ความพร้อมของโครงสร้างพื้นฐานทางกายภาพ
- พื้นที่แร็คมาตรฐานขนาด 19 นิ้ว 1RU พร้อมการระบายอากาศที่เหมาะสม
- การจัดแนวการไหลเวียนของอากาศระหว่างช่องทางร้อนและช่องทางเย็นได้รับการยืนยันแล้ว
- ระบบจ่ายไฟอิสระสองระบบ (แนะนำอย่างยิ่งให้ใช้ระบบสำรอง A/B)
- การต่อสายดินที่ถูกต้องและการตรวจสอบความจุของ PDU
การวางแผนฮาร์ดแวร์และเลนส์
N9K-C93180YC-FX3 มีพอร์ตดาวน์ลิงก์ SFP28 ขนาด 25G จำนวน 48 พอร์ต, พอร์ตอัปลิงก์ QSFP28 ขนาด 100G จำนวน 6 พอร์ต และความสามารถในการแยกพอร์ตที่ยืดหยุ่นได้ ขึ้นอยู่กับระบบปฏิบัติการ NX-OS และการรองรับอุปกรณ์ออปติก ประเด็นสำคัญที่ควรพิจารณาในการวางแผน ได้แก่:
- ตรวจสอบความเข้ากันได้ของ QSFP28 / SFP28 ทั่วทั้งระบบ
- ตรวจสอบความถูกต้องของกลยุทธ์การเดินสาย DAC เทียบกับสายไฟเบอร์
- ปรับความเร็วของ NIC เซิร์ฟเวอร์ (10G / 25G / 100G) ให้สอดคล้องกับการออกแบบพอร์ตของสวิตช์
การตรวจสอบ NX-OS และความเข้ากันได้ (ขั้นตอนสำคัญ)
ก่อนการติดตั้งใช้งาน โปรดตรวจสอบให้แน่ใจว่าเวอร์ชันของ NX-OS มีความสอดคล้องกันทั่วทั้งโครงสร้าง Nexus ที่มีอยู่เดิม ฟีเจอร์ EVPN-VXLAN พร้อมใช้งานหากมีการใช้งานในสถาปัตยกรรม ความเข้ากันได้ของโดเมน vPC (หากมีการออกแบบแบบ dual-leaf) และการจัดเรียง MTU ให้ตรงกันระหว่างเครือข่าย underlay และ overlay
การติดตั้งทางกายภาพ: การติดตั้ง N9K-C93180YC-FX3 ลงในแร็ค
การเตรียมการติดตั้งแร็ค
ใช้ชุดติดตั้งแร็ค 1RU อย่างเป็นทางการของ Cisco ซึ่งประกอบด้วยรางและขายึด
ขั้นตอนการติดตั้ง
- ติดแผ่นยึดแร็คให้แน่นทั้งสองด้านของตัวเครื่อง
- ติดตั้งระบบรางเข้ากับแร็คมาตรฐานขนาด 19 นิ้ว
- ค่อยๆ ยกและเลื่อนสวิตช์เข้าที่ (แนะนำให้ใช้คนสองคนช่วยกัน)
- ยึดตัวเครื่องเข้ากับรางแร็คโดยใช้สกรูยึดมาตรฐาน
ตรวจสอบให้แน่ใจว่าทิศทางการไหลของอากาศจากด้านหน้าไปด้านหลังถูกต้องระหว่างการติดตั้ง เพื่อรักษาประสิทธิภาพการระบายความร้อน
การตั้งค่าพลังงานและการระบายความร้อน
- ติดตั้งโมดูล PSU ทั้งสองตัวเพื่อความปลอดภัยสำรอง
- เชื่อมต่อแหล่งจ่ายไฟอิสระ (แนะนำให้แยก PDU เป็น A/B)
- ตรวจสอบให้แน่ใจว่าทิศทางการไหลของอากาศสม่ำเสมอทั่วทั้งพัดลมและแหล่งจ่ายไฟ
- ตรวจสอบสถานะไฟ LED เพื่อให้แน่ใจว่าระบบจ่ายไฟและพัดลมทำงานได้อย่างปกติ
การบูตครั้งแรกและการตรวจสอบระบบ (การเริ่มต้นระบบ NX-OS)
หลังจากเปิดเครื่อง ระบบจะบูตเข้าสู่ระบบปฏิบัติการ NX-OS
การกำหนดค่าการเข้าถึงคอนโซล
- อัตราบอด: 9600
- เทอร์มินัล: คอนโซลอนุกรมมาตรฐาน (RJ-45 หรือ USB)
คำสั่งตรวจสอบสถานะระบบ
การตรวจสอบความถูกต้องของคีย์
- โหลดเวอร์ชัน NX-OS อย่างถูกต้องแล้ว
- โมดูลทั้งหมดอยู่ในสถานะทำงาน
- ไม่มีสัญญาณเตือนของพาวเวอร์ซัพพลายหรือพัดลม
ตรวจสอบสต็อก เปรียบเทียบตัวเลือก หรือพูดคุยกับทีมงานของเรา
การกำหนดค่าในวันแรก: การตั้งค่า NX-OS เบื้องต้น
การกำหนดค่าชื่อโฮสต์
การตั้งค่าอินเทอร์เฟซการจัดการ
เปิดใช้งานการเข้าถึง SSH
บันทึกการกำหนดค่า
ในขั้นตอนนี้ ควรจะสามารถเข้าถึงสวิตช์ผ่าน SSH จากเครือข่ายการจัดการนอกแบนด์ได้แล้ว
การออกแบบบทบาทของเครือข่าย: การวางตำแหน่งแบบใบไม้หรือแบบแกนกลาง
เราเตอร์ N9K-C93180YC-FX3 มักถูกใช้งานในสถาปัตยกรรมแบบ Spine-Leaf ซึ่งการกำหนดบทบาทส่งผลโดยตรงต่อความสามารถในการขยายขนาดและประสิทธิภาพการรับส่งข้อมูล
บทบาทของใบไม้
- เลเยอร์การเข้าถึงฝั่งเซิร์ฟเวอร์
- การแบ่งส่วน VLAN และการกำหนดเส้นทางฮอปแรก
- โดยทั่วไปจะใช้งานในรูปแบบคู่สำรองโดยใช้ vPC
บทบาทของกระดูกสันหลัง
- โครงข่ายหลักสำหรับการส่งต่อข้อมูลระดับเลเยอร์ 3 ความเร็วสูง
- การกระจายปริมาณการรับส่งข้อมูลตาม ECMP
- ความซับซ้อนในการกำหนดค่าขั้นต่ำเพื่อความสามารถในการขยายขนาด
ข้อควรพิจารณาเกี่ยวกับ EVPN-VXLAN
ในการออกแบบศูนย์ข้อมูลสมัยใหม่ สวิตช์ Leaf ทำหน้าที่เป็น VTEP (Virtual Device Platform) เลเยอร์ Spine ทำหน้าที่เป็นโครงข่ายหลักของการกำหนดเส้นทาง IP และ BGP EVPN ช่วยให้สามารถสร้างระนาบควบคุมแบบโอเวอร์เลย์ที่ปรับขนาดได้
การตรวจสอบความถูกต้องของโครงสร้างความเร็วสูง (ความพร้อมสำหรับ 25G / 100G)
การตรวจสอบสถานะอินเทอร์เฟซ
ตรวจสอบให้แน่ใจว่าสถานะการเชื่อมต่อเป็น up/up การเจรจาความเร็วถูกต้อง และไม่มีอินเทอร์เฟซที่ถูกปิดใช้งานเนื่องจากข้อผิดพลาด
การจัดตำแหน่ง FEC (สำคัญต่อเสถียรภาพ 25G/100G)
ในสภาพแวดล้อมความเร็วสูง ความไม่ตรงกันของการแก้ไขข้อผิดพลาดล่วงหน้า (FEC) อาจนำไปสู่การสูญหายของแพ็กเก็ต การเชื่อมต่อไม่เสถียร และความหน่วงแฝงที่ไม่สม่ำเสมอ ตรวจสอบให้แน่ใจว่าการกำหนดค่า FEC ของอินเทอร์เฟซสวิตช์และการตั้งค่า FEC ของการ์ดเครือข่ายเซิร์ฟเวอร์ (RS-FEC / FC-FEC) มีความสอดคล้องกัน
ปัญหาทั่วไปในการติดตั้งใช้งานและวิธีแก้ไขทางวิศวกรรม
ปัญหาความเข้ากันได้ของทรานซีฟเวอร์
อาการ: อินเทอร์เฟซยังคงใช้งานไม่ได้หรือเข้าสู่สถานะ err-disabled
สาเหตุ: โมดูล QSFP/SFP ที่ไม่รองรับหรือไม่ตรงกัน
ความละเอียด: ตรวจสอบความเข้ากันได้ของระบบเลนส์ก่อนการใช้งานจริง โดยใช้เมทริกซ์ที่ได้รับการอนุมัติจากซิสโก้
การกำหนดค่าการเข้าถึงการจัดการไม่ถูกต้อง
อาการ: อุปกรณ์บูตเครื่องได้ตามปกติ แต่ไม่สามารถเข้าถึงจากระยะไกลได้
สาเหตุ: IP ของ mgmt0 ไม่ถูกต้อง หรือการกำหนดเส้นทางไม่ตรงกัน
ความละเอียด: ตรวจสอบการเชื่อมต่อเครือข่าย OOB และการกำหนดค่าเกตเวย์
การไหลเวียนของอากาศที่ไม่สมดุล
อาการ: พัดลมทำงานด้วยความเร็วสูงสุดอย่างต่อเนื่อง
สาเหตุ: โมดูลปรับทิศทางการไหลของอากาศแบบผสม
ความละเอียด: ตรวจสอบให้แน่ใจว่าการจัดวางท่อไอดีหรือท่อไอเสียด้านข้างท่าเรือมีความสม่ำเสมอ
ความไม่สอดคล้องกันของเวอร์ชัน NX-OS
อาการ: ความไม่ตรงกันของลักษณะเฉพาะในอุปกรณ์สิ่งทอต่างๆ
สาเหตุ: มีการใช้งาน NX-OS เวอร์ชันต่างๆ ผสมกันในสภาพแวดล้อมการผลิต
ความละเอียด: กำหนดเวอร์ชัน NX-OS ให้เป็นมาตรฐานเดียวกันในสวิตช์ Nexus ทุกตัวก่อนทำการรวมระบบ
รายการตรวจสอบความถูกต้องของการใช้งานจริง (ก่อนการใช้งานจริง)
ก่อนเริ่มใช้งานจริง โปรดตรวจสอบพารามิเตอร์ต่อไปนี้:
- สามารถเข้าถึง mgmt0 ผ่านทาง SSH
- แหล่งจ่ายไฟทั้งหมดทำงานในโหมดสำรอง
- ไม่มีสัญญาณเตือนพัดลมหรือความร้อน
- การกำหนดชื่อโฮสต์และบทบาทที่ถูกต้อง
- ได้ทำการทดสอบความเสถียรและความเร็วของการเชื่อมต่ออัปโหลดทั้งหมดแล้ว
- เวอร์ชัน NX-OS สอดคล้องกันทั่วทั้งโครงสร้าง
- ไม่มีข้อผิดพลาดหรือการหลุดการเชื่อมต่อของอินเทอร์เฟซ
มุมมองทางวิศวกรรม: เหตุใดระเบียบวินัยในการติดตั้งจึงมีความสำคัญ
ในสภาพแวดล้อมศูนย์ข้อมูลสมัยใหม่ ขั้นตอนการติดตั้งไม่ใช่เพียงแค่ภารกิจเชิงกล แต่เป็นการบังคับใช้การออกแบบที่จะกำหนดเสถียรภาพของเครือข่ายในระยะยาว Cisco Nexus 93180YC-FX3 กลายเป็นส่วนหนึ่งของโครงสร้างเครือข่ายขนาดใหญ่ ที่ซึ่งความไม่ตรงกันเล็กน้อยในการกำหนดค่าอาจขยายใหญ่ขึ้นจนทำให้เกิดความไม่เสถียรในการใช้งานจริง ความไม่สอดคล้องกันของอุปกรณ์ออปติกส่งผลต่อความหน่วงของแอปพลิเคชัน และการเปลี่ยนแปลงเวอร์ชันทำให้เกิดความซับซ้อนในการดำเนินงาน การติดตั้งอย่างมีระเบียบวินัยตั้งแต่วันแรก (Day-0 deployment) ช่วยให้มั่นใจได้ว่าสถาปัตยกรรมแบบแกนหลักและแกนรอง (spine-leaf architecture) ทั้งหมดทำงานเป็นระบบเดียวที่คาดการณ์ได้
ข้อคิดส่งท้ายและกลยุทธ์การนำไปใช้
Cisco Nexus N9K-C93180YC-FX3 มอบประสิทธิภาพสูงสำหรับสถาปัตยกรรมศูนย์ข้อมูลสมัยใหม่ แต่คุณค่าที่แท้จริงจะเกิดขึ้นได้ก็ต่อเมื่อการติดตั้งดำเนินการโดยคำนึงถึงความเข้ากันได้ ความสม่ำเสมอของการกำหนดค่า และการออกแบบที่สอดคล้องกันอย่างเคร่งครัด
ในการติดตั้งระบบในองค์กรหลายแห่ง การตรวจสอบความถูกต้องของอุปกรณ์ออปติก เวอร์ชัน NX-OS และความสอดคล้องของรายการชิ้นส่วน (BOM) ในช่วงเริ่มต้น จะช่วยลดความเสี่ยงในการติดตั้งและป้องกันความล่าช้าในการเปลี่ยนระบบที่อาจก่อให้เกิดค่าใช้จ่ายสูงได้ สำหรับสภาพแวดล้อม Nexus ที่ซับซ้อนหรือมีขนาดใหญ่ ทีมวิศวกรรมหลายทีมเลือกที่จะทำการตรวจสอบความเข้ากันได้และรายการชิ้นส่วน (BOM) ก่อนการติดตั้ง เพื่อให้แน่ใจว่าทุกส่วนประกอบสอดคล้องกับสถาปัตยกรรมที่ตั้งใจไว้ก่อนเริ่มการติดตั้ง