Cơ sở hạ tầng NVIDIA GB200 NVL72 và Cáp MPO-8 APC cho các Đơn vị Mở rộng (Scalable Units)
Phân tích kiến trúc cáp của một Đơn vị Mở rộng (Scalable Unit - SU) Blackwell, nơi 8 rack hội tụ thành 9.216 sợi quang hoạt động.
Đơn vị Mở rộng (SU) DGX GB200 đại diện cho một sự thay đổi lớn trong kiến trúc trung tâm dữ liệu. SU là một thực thể thống nhất gồm 576 GPU được kết nối bởi 9.216 sợi quang hoạt động. ScaleFibre cung cấp các cáp trunk được bấm chính xác cần thiết để quản lý mật độ này.
Bốn Kiến trúc SuperPOD Vật lý
NVIDIA phân chia SU thành các lớp vật lý riêng biệt để cách ly lưu lượng GPU.
MN-NVL (NVLink 5)
Mở rộng nội bộMạng rack ’nội bộ’ kết nối 72 GPU ở tốc độ 1,8 TB/s.
- Không có sợi quang
- Backplane đồng thụ động
- Đầu nối Blind-mate
InfiniBand tính toán
Mở rộng ngoại viKiến trúc ‘Đông-Tây’ chính cho việc đào tạo đa nút lớn.
- 4.608 sợi hoạt động trên mỗi SU
- Cấu trúc liên kết tối ưu hóa đường ray
- Quantum-3/Quantum-2
Lưu trữ & Trong băng tần
FrontendKiến trúc dựa trên Ethernet để nhập dữ liệu và cung cấp tài nguyên tốc độ cao.
- Hệ số chặn 5:3
- Xử lý tải bằng DPU BlueField-3
- Hỗ trợ VXLAN/RoCE
Quản lý OOB
Mặt phẳng điều khiểnMạng cách ly để đo từ xa phần cứng, BMC và quản lý PDU.
- Đồng RJ45/Cat6
- Tầng chuyển mạch SN2201
- Bảo mật cách ly vật lý
Các Chỉ số SU Exascale
Một Đơn vị Mở rộng (Scalable Unit - SU) gồm 8 rack đại diện cho khối xây dựng cơ bản của Nhà máy AI NVIDIA.
9.216
Sợi quang hoạt động trên mỗi SU4.608
Sợi dành riêng cho tính toán5:3
Tỷ lệ chặn lưu trữ400G/800G
Tốc độ cổng gốc
Cáp trunk MPO số lượng sợi cao
Cụm cáp trunk MPO số lượng sợi quang cao với 48 đến 576 sợi. Cho phép triển khai nhanh chóng, quy mô lớn với ít nhân công và chi phí lắp đặt tối thiểu.
Xem chi tiết cáp trunk MPO số lượng sợi caoBa Cấp độ Kết nối của SU
Cấp độ A: Server-to-Leaf
1.152 sợi trên mỗi rack sử dụng cáp trunk số sợi cao hoặc dây nhảy để kết nối các nút NVL72 với Leaf Switches.
Cấp độ B: Leaf-to-Spine
Tổng hợp lưu lượng được căn chỉnh theo đường ray trong SU bằng cách sử dụng các liên kết không chặn 1:1 cho tính toán.
Cấp độ C: Spine-to-Core
Mở rộng vượt ra ngoài SU đến một khu vực Core tập trung bằng cách sử dụng các cáp trunk số lượng cao.
Kết nối cũ (điểm-tới-điểm)
- ✕Phức tạp thủ công: Yêu cầu 9.216 dây nhảy quang riêng lẻ cho mỗi khối 8 rack.
- ✕Cản trở luồng khí: Các bó cáp dày đặc chặn đường thoát khí của hệ thống làm mát bằng chất lỏng.
- ✕Hồ sơ rủi ro: Khả năng cao xảy ra ‘đường ray chéo’ trong quá trình đấu nối 1:1 thủ công.
- ✕Thời gian triển khai: Hơn 115 giờ để định tuyến và dán nhãn thủ công cho mỗi SU.
Hệ thống cáp Trunk Mô-đun Số Sợi Cao
- ✓Cắm-và-chạy: Gộp hàng nghìn sợi quang vào các cáp trunk được bấm sẵn 128F/144F/256F/288F/576F tùy chỉnh.
- ✓Tối ưu hóa nhiệt: Cáp đường kính nhỏ tối đa hóa luồng khí trong các tủ rack dày đặc.
- ✓Hiệu quả đường dẫn: Gộp 1.152 sợi hoạt động trên mỗi rack vào các đường trục MPO số lượng cao.
- ✓Hồ sơ lắp đặt: Triển khai nhanh chóng thông qua các bộ phận được bấm sẵn đã kiểm tra tại nhà máy.
Tăng trưởng Sợi quang hoạt động: Từ Nút đến SuperPOD Đầy Đủ
Độ phức tạp của hệ thống cápHình ảnh hóa Đơn vị mở rộng (SU)
Khối tính toán 8-Rack
Một NVIDIA GB200 SU (Đơn vị mở rộng) bao gồm 8 rack, mỗi rack chứa một hệ thống DGX GB200 NVL72 với 72 GPU.
Phân phối Cáp Trunk số sợi cao
Gộp hàng nghìn sợi quang rack vào các cáp trunk mật độ cao để thông gió, lắp đặt nhanh chóng và sử dụng đường dẫn tối thiểu.
Làm mát bằng chất lỏng
Các tấm làm mát bằng chất lỏng giúp ổn định môi trường khay, cho phép các bộ thu phát OSFP tản nhiệt hiệu quả thông qua các bộ tản nhiệt gắn kèm.
Câu hỏi thường gặp về kỹ thuật
Xây dựng Kiến trúc Nhà máy AI của bạn
ScaleFibre cung cấp các giải pháp cáp được bấm sẵn cho việc triển khai NVIDIA DGX SuperPOD.
Liên hệNhận thông tin chi tiết về cáp trunk số sợi cao cho NVIDIA DGX SU của bạn.


