国产精品久久久aaaa,日日干夜夜操天天插,亚洲乱熟女香蕉一区二区三区少妇,99精品国产高清一区二区三区,国产成人精品一区二区色戒,久久久国产精品成人免费,亚洲精品毛片久久久久,99久久婷婷国产综合精品电影,国产一区二区三区任你鲁

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

NVIDIA如何優化AI工廠的網絡可靠性與功耗

NVIDIA英偉達企業解決方案 ? 來源:NVIDIA英偉達企業解決方案 ? 2025-09-04 11:23 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

隨著 AI 重新定義計算格局,網絡已成為構建未來數據中心發展的關鍵支柱。大語言模型的訓練性能不僅取決于計算資源,更受到底層網絡敏捷性、容量和智能程度的影響。行業正從傳統以 CPU 為中心的基礎架構,邁向緊耦合的、GPU 驅動和網絡定義的 AI 工廠。

NVIDIA 構建了一套全面的網絡解決方案,以滿足現代大規模 AI 訓練和推理對急速流量突發、高帶寬及低延遲的需求。該方案涵蓋Spectrum-X以太網、NVIDIA Quantum InfiniBand和BlueField平臺。通過將計算與通信一起進行編排,NVIDIA 的網絡產品組合為構建可擴展、高效且高可靠的 AI 數據中心奠定了基礎,成為了推動 AI 創新的中樞神經系統。

在這篇博客中,我們將探討 NVIDIA 的網絡創新如何通過 CPO 技術,為大型 AI 工廠帶來顯著的能效提升和更強的可靠性。

AI 工廠基礎設施傳統企業數據中心有何不同?

在傳統企業數據中心中,Tier 1 交換機通常部署在每個服務器機架內,通過銅纜直接連接服務器,從而降低功耗并簡化連接。這種架構能夠有效滿足以 CPU 為中心的、網絡需求適中的工作負載。

相比之下,NVIDIA 開創的現代 AI 工廠配備了超高密的計算機架和數以千計的 GPU,能面向單一任務實現協同工作。這就需要在整個數據中心內實現最高帶寬和最低的延遲,一種新的網絡拓撲結構應運而生——即將 Tier 1 交換機部署在獨立的機柜。這種布局顯著增加了服務器與交換機之間的距離,使得光纖網絡變得至關重要。由此帶來的結果是功耗和光學組件數量大幅上升,如今在網卡到交換機以及交換機到交換機的連接中,均需依賴光學組件來實現高效傳輸。

如圖 1 所示,這一演變體現了為滿足大規模 AI 工作負載對高帶寬和低延遲的需求,在網絡拓撲和技術層面所發生的重大變革,并從根本上重塑了數據中心的物理結構與能耗特征。

圖 1:橫向擴展能力與 AI 密度取決于光纖連接

如何優化 AI 工廠的網絡可靠性與功耗?

采用可插拔光模塊的傳統網絡交換機依賴于多個電接口。在這些架構中,數據信號需經過一條較長的電傳輸路徑:從交換機 ASIC 出發,經 PCB連接器,最終到達外部光收發器,之后才能轉換為光信號。如圖 2 所示,這種分段式傳輸在每秒 200Gb/s 的通道中可能帶來高達 22 dB 的電損耗。這顯著增加了對復雜數字信號處理以及多個有源組件的需求。

3deced24-87e5-11f0-8c8f-92fbcf53809c.jpg

圖 2:Spectrum-X Photonics 可將信號完整性提升 64 倍

采用可插拔光模塊的結果就是功耗更高(每個接口通常為 30W)、發熱量增加以及潛在故障點顯著增多。大量的獨立模塊和連接不僅推高了系統功耗和組件數量,還直接影響了鏈路的可靠性,隨著 AI 部署規模的不斷擴大,這些問題將帶來持續的運營挑戰。各組件的典型功耗如圖 3 所示。

3e4685be-87e5-11f0-8c8f-92fbcf53809c.jpg

圖 3:Spectrum-X Photonics 將功耗降低至 1/3.5

相比之下,采用 CPO 技術的交換機將電光轉換部分直接集成到交換機封裝中。光纖直接連接至和 ASIC 封裝在一起的光引擎,使電信號損耗降低至約 4 dB,全通道功耗降至 9W。通過簡化信號路徑并消除不需要的接口,該設計顯著提升了信號完整性、可靠性和能效,正是高密度、高性能 AI 數據中心所需的關鍵技術。

CPO 封裝為 AI 工廠帶來了哪些優勢?

NVIDIA 推出基于 CPO 技術的系統,正是為了應對 AI 工廠前所未有的需求。通過將光引擎直接集成至交換機 ASIC,全新的 NVIDIA Quantum-X Photonics 和 Spectrum-X Photonics(如圖 4 所示)將取代傳統的可插拔光模塊。這一創新簡化了信號傳輸路徑,顯著提升了性能、能效和系統可靠性。新產品不僅在帶寬和端口密度方面創下新高,更從根本上重塑了 AI 數據中心的經濟模型與物理架構。

圖 4:集成共封裝的硅光引擎的 NVIDIA Photonics 交換 ASIC

Quantum-X Photonics如何引領下一代 InfiniBand 網絡的誕生

隨著 NVIDIA 推出 Quantum-X InfiniBand Photonics 平臺,NVIDIA 將 InfiniBand 交換技術提升至全新高度。該平臺具備以下功能:

交換容量達 115 Tb/s,支持 144 個端口,每個端口速率為 800 Gb/s。

借助第四代 NVIDIA SHARP 技術,實現每秒 14.4 萬億次的網絡計算能力。

液冷技術,實現卓越的散熱管理。

專用 InfiniBand 管理端口,支持強大的帶內控制與監測功能。

NVIDIA Quantum-X 采用集成硅光技術,提供無與倫比的帶寬、超低延遲和卓越的運營可靠性。該 CPO 設計不僅降低了功耗、提升了可靠性,還能實現快速部署,充分滿足大規模代理式 AI 工作負載對互連的嚴苛需求。

Spectrum-X Photonics如何助力構建大規模以太網 AI 工廠

NVIDIA Spectrum-X Photonics 交換機將 CPO 技術革命拓展至以太網領域,專為生成式 AI 以及大規模大語言模型(LLM)的訓練與推理任務而設計。全新的 Spectrum-X Photonics 產品包含兩款基于液冷機箱和 Spectrum-6 ASIC 的系統:

Spectrum SN6810:具備 128 個 800 Gb/s 端口,總帶寬達 102.4 Tb/s。

Spectrum SN6800:具備 512 個 800 Gb/s 端口,總帶寬高達 409.6 Tb/s,性能卓越。

這兩個平臺均基于 NVIDIA 硅光技術,大幅減少了離散組件和電接口的數量。與前代架構相比,新架構能效提升達 3.5 倍,同時通過減少整體易損光學元件數量,將系統可靠性提高了 10 倍。技術人員可享受更高的可維護性,而 AI 運營商則能將部署時間縮短至 1/ 1.3 (約 77%),并顯著縮短第一個 Token 的生成時間。

NVIDIA 的 CPO 技術組得益于強大的合作伙伴生態系統的支持。這種跨行業協作不僅保障了技術性能,更確保了全球大規模 AI 基礎設施部署所需的大規模量產能力與可靠性。

CPO 如何實現性能、功耗與可靠性的突破

CPO 的優勢顯而易見:

3.5 倍能效提升:通過將光學器件直接集成到交換機 ASIC 封裝中和減少了可插拔光模塊,即使網絡密度大幅增加,每個端口的功耗也顯著降低。

可靠性提升 10 倍:通過減少有源器件和去除了易發生故障的光模塊,顯著提高了系統正常運行時間和運行可靠性。

將運營時間縮短至原來的 1/1.3 (約 77%):簡化的組裝與維護有助于加快 AI 工廠的部署,并實現快速擴展。

這些交換機系統具備業界領先的帶寬性能(高達 409.6 Tb/s,512 個端口,單端口速率達 800 Gb/s),并配備高效的液冷系統,能夠應對高密度、高功耗的運行環境。圖 5(下圖)展示了 NVIDIA Quantum-X Photonics Q3450 和 Spectrum-X Photonics 的兩種型號:單 ASIC 的 SN6810,以及集成光纖重組功能的四 ASIC 型號 SN6800。

這些產品共同推動了網絡架構的轉型,有效滿足了 AI 工作負載對高帶寬和超低延遲的嚴苛需求。通過與先進的光學組件與強大的系統集成伙伴相結合,構建出一個面向當前及未來擴展需求高度優化的網絡架構。隨著超大規模數據中心對快速部署和高可靠性的要求不斷提升,CPO 正從一項創新技術逐步轉變為不可或缺的基礎設施。

圖 5:NVIDIA Quantum-X 與 Spectrum-X Photonics 交換機系統

如何開啟代理式 AI 的新時代

NVIDIA Quantum-X 和 Spectrum-X Photonics 交換機標志著網絡架構向專為滿足大規模 AI 嚴苛需求而設計的全新轉變。通過消除傳統的電和可插拔架構帶來的瓶頸,CPO 系統能夠提供現代 AI 工廠所需的高性能、高能效與高可靠性。NVIDIA Quantum-X InfiniBand 交換機預計于 2026 年初上市,Spectrum-X 以太網交換機則將于 2026 年下半年推出。NVIDIA 正以此引領網絡革新,為代理式 AI 時代樹立優化網絡的新標準。

敬請關注本博客的第二部分,我們將深入探討 NVIDIA Quantum-X Photonics 和 Spectrum-X Photonics 平臺的核心——硅光引擎的架構與工作原理,揭示推動下一代光連接成為現實的關鍵創新與工程突破。從芯片集成的最新進展到新型調制技術,下一篇文章將全面解析這些光電引擎在 AI 網絡領域中脫穎而出的技術優勢。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 以太網
    +關注

    關注

    41

    文章

    5997

    瀏覽量

    180798
  • NVIDIA
    +關注

    關注

    14

    文章

    5592

    瀏覽量

    109716
  • 交換機
    +關注

    關注

    23

    文章

    2904

    瀏覽量

    104460
  • AI
    AI
    +關注

    關注

    91

    文章

    39755

    瀏覽量

    301355

原文標題:利用 CPO 技術擴展 AI 工廠,提高能效

文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達企業解決方案】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    使用NORDIC AI的好處

    ,時延更低,系統在網絡不穩定甚至離線時也能繼續工作。[Edge AI 概述] 提升隱私與可靠性 原始傳感器數據(如運動、生理信號等)可以留在本地,只上傳推理結果,有利于隱私與數據安全。 本地決策
    發表于 01-31 23:16

    什么是高可靠性

    、如何評估PCB是否具備高可靠性? 高可靠性是結合“工程技術”與“管理藝術”的一種實踐科學,穩健地產出高可靠PCB須建立一整套“規范、高效、協同、可控”的管理程序,要求工廠必須全方位管
    發表于 01-29 14:49

    NVIDIA Spectrum-X以太網硅光技術助力AI工廠網絡創新

    NVIDIA 將率先為 AI 工廠引入采用光電一體封裝 (CPO) 的優化以太網網絡,通過 NVIDI
    的頭像 發表于 01-14 09:06 ?607次閱讀
    <b class='flag-5'>NVIDIA</b> Spectrum-X以太網硅光技術助力<b class='flag-5'>AI</b><b class='flag-5'>工廠</b><b class='flag-5'>網絡</b>創新

    國產AI芯片沖至160億美元:狂歡下的“可靠性”大考

    國產AI芯片年銷售額達160億美元,標志著設計環節實現突破,但商業落地的核心考驗已轉向可靠性AI芯片因高算力、高功耗特性,面臨電源與時鐘穩定性、高溫耐久
    的頭像 發表于 12-11 15:33 ?330次閱讀

    霍爾開關如何保證自身的可靠性和實用

    霍爾開關的可靠性(穩定工作、不易失效)和實用(適配場景、易集成、低使用成本),核心依賴 “環境適配設計、電氣防護、低功耗優化、標準化集成”四大方向,
    的頭像 發表于 12-02 16:53 ?1406次閱讀
    霍爾開關如何保證自身的<b class='flag-5'>可靠性</b>和實用<b class='flag-5'>性</b>

    NVIDIA擴大與微軟合作推動AI超級工廠建設

    在 Microsoft Ignite 大會上,NVIDIA 擴大與微軟的合作,包括在由 NVIDIA Blackwell 平臺驅動的全新 Microsoft Fairwater AI 超級工廠
    的頭像 發表于 12-01 09:52 ?790次閱讀

    SLM2004SCA-13GTR 200V高壓半橋驅動芯片的可靠性與時序優化設計

    移位、時序控制和保護電路高度集成。這種單芯片解決方案顯著減少了外圍元件數量,在降低BOM成本和PCB面積需求的同時,大幅提升了系統的整體可靠性優化的時序性能 芯片680ns/180ns的非對稱開關
    發表于 11-27 08:23

    選PCBA工廠只看設備?這些“軟實力”才是可靠性命門!

    一站式PCBA加工廠家今天為大家講講怎么判斷PCBA工廠可靠性?判斷PCBA工廠可靠性的四個關鍵方面。判斷PCBA
    的頭像 發表于 10-15 09:04 ?522次閱讀

    可靠性設計的十個重點

    專注于光電半導體芯片與器件可靠性領域的科研檢測機構,能夠對LED、激光器、功率器件等關鍵部件進行嚴格的檢測,致力于為客戶提供高質量的測試服務,為光電產品在各種高可靠性場景中的穩定應用提供堅實的質量
    的頭像 發表于 08-01 22:55 ?1050次閱讀
    <b class='flag-5'>可靠性</b>設計的十個重點

    提供半導體工藝可靠性測試-WLR晶圓可靠性測試

    隨著半導體工藝復雜度提升,可靠性要求與測試成本及時間之間的矛盾日益凸顯。晶圓級可靠性(Wafer Level Reliability, WLR)技術通過直接在未封裝晶圓上施加加速應力,實現快速
    發表于 05-07 20:34

    電機微機控制系統可靠性分析

    。純分享帖,需要者可點擊附件獲取完整資料~~~*附件:電機微機控制系統可靠性分析.pdf 【免責聲明】本文系網絡轉載,版權歸原作者所有。本文所用視頻、圖片、文字如涉及作品版權問題,請第一時間告知,刪除內容!
    發表于 04-29 16:14

    IGBT的應用可靠性與失效分析

    包括器件固有可靠性和使用可靠性。固有可靠性問題包括安全工作區、閂鎖效應、雪崩耐量、短路能力及功耗等,使用可靠性問題包括并聯均流、軟關斷、電磁
    的頭像 發表于 04-25 09:38 ?3058次閱讀
    IGBT的應用<b class='flag-5'>可靠性</b>與失效分析

    電路可靠性設計與工程計算技能概述

    電路可靠性設計與工程計算通過系統學習電路可靠性設計與工程計算,工程師不僅能提高電路的可靠性和穩定性,還能優化產品設計過程,減少潛在的故障風險,從而提升產品的市場競爭力和消費者信任度。為
    的頭像 發表于 03-26 17:08 ?763次閱讀
    電路<b class='flag-5'>可靠性</b>設計與工程計算技能概述

    適用于數據中心和AI時代的800G網絡

    )作為一家備受信賴的信息通信技術產品及解決方案提供商,提供高可靠性的800G光模塊和解決方案,為AI工廠AI云平臺提供高性能、低延遲且可擴展的網絡
    發表于 03-25 17:35

    英偉達GTC2025亮點:NVIDIA認證計劃擴展至企業存儲領域,加速AI工廠部署

    ,現在已將企業存儲納入其中,旨在通過加速計算、網絡、軟件和存儲,助力企業更高效地部署 AI 工廠。 在企業構建 AI 工廠的過程中,獲取高質
    的頭像 發表于 03-21 19:38 ?2052次閱讀