5月9日,在2023年云網(wǎng)智聯(lián)大會(huì)主論壇,中國(guó)移動(dòng)研究院攜手中國(guó)信通院、騰訊、鵬城實(shí)驗(yàn)室、清華大學(xué)、華為、中興、銳捷、新華三、中信科、思博倫、Intel、Marvell、盛科等十余家合作伙伴,聯(lián)合發(fā)布《全調(diào)度以太網(wǎng)技術(shù)架構(gòu)(GSE)白皮書(shū)》,中國(guó)移動(dòng)研究院副院長(zhǎng)段曉東、信通院總工敖立及其余合作伙伴代表共同出席發(fā)布儀式。
全調(diào)度以太網(wǎng)技術(shù)架構(gòu)白皮書(shū)發(fā)布儀式
《全調(diào)度以太網(wǎng)技術(shù)架構(gòu)白皮書(shū)》旨在推動(dòng)面向未來(lái)智算中心的新型全調(diào)度以太網(wǎng)技術(shù)方案,希望能夠助力產(chǎn)業(yè)突破智算中心網(wǎng)絡(luò)性能瓶頸,打造無(wú)阻塞、高帶寬、超低時(shí)延的新型智算中心網(wǎng)絡(luò),助力AIGC等高性能業(yè)務(wù)快速發(fā)展。
智算業(yè)務(wù)普遍采用分布式并行計(jì)算進(jìn)行訓(xùn)練,而并行模式均需要多個(gè)計(jì)算設(shè)備間進(jìn)行多次集合通信操作,AI訓(xùn)練中通常采用同步模式,多機(jī)多卡間完成集合通信操作后才可進(jìn)行訓(xùn)練的下一輪迭代或計(jì)算。在這個(gè)過(guò)程中,不管是拉取數(shù)據(jù)樣本還是計(jì)算節(jié)點(diǎn)間進(jìn)行模型參數(shù)同步,都需要高性能、低時(shí)延的網(wǎng)絡(luò)。智算中心網(wǎng)絡(luò)作為底層通信連接底座,成為智算中心提升算力性能的關(guān)鍵因素。
隨著智算業(yè)務(wù)的發(fā)展,智算中心的數(shù)據(jù)流更加復(fù)雜多變,現(xiàn)有基于流的負(fù)載分擔(dān)技術(shù)很容易會(huì)造成哈希路徑上負(fù)載不均,導(dǎo)致網(wǎng)絡(luò)有效帶寬低、時(shí)延抖動(dòng)大,一旦網(wǎng)絡(luò)性能不佳,就會(huì)影響AI訓(xùn)練的質(zhì)量和速度。面向未來(lái)智算中心規(guī)模建設(shè)和AI大模型發(fā)展及部署需求,如何打造無(wú)阻塞、高帶寬、超低時(shí)延的高性能網(wǎng)絡(luò)成為提升算力水平的關(guān)鍵,也成為當(dāng)前國(guó)內(nèi)外數(shù)據(jù)中心網(wǎng)絡(luò)領(lǐng)域創(chuàng)新焦點(diǎn)。
中國(guó)移動(dòng)研究院主導(dǎo)提出的全調(diào)度以太網(wǎng)技術(shù)架構(gòu),在最大限度兼容現(xiàn)有以太網(wǎng)標(biāo)準(zhǔn)的前提下,將高性能計(jì)算需求融入以太網(wǎng)。創(chuàng)新性提出報(bào)文容器(PKTC)概念,以及從“流”分發(fā)到“報(bào)文容器”分發(fā)轉(zhuǎn)變、從“推”流到“拉”流轉(zhuǎn)變、從“局部決策”到“全局調(diào)度”轉(zhuǎn)變?nèi)蠛诵睦砟睿瑯?gòu)建出全網(wǎng)流量有序調(diào)度、鏈路帶寬高效利用、網(wǎng)絡(luò)狀態(tài)精確感知的高性能網(wǎng)絡(luò)。徹底解決了傳統(tǒng)網(wǎng)絡(luò)技術(shù)負(fù)載不均,公平調(diào)度難、擁塞控制能力不足等技術(shù)難題,為智算中心高性能網(wǎng)絡(luò)發(fā)展奠定了基礎(chǔ)。
為推動(dòng)GSE架構(gòu)完善和產(chǎn)業(yè)支持,中國(guó)移動(dòng)聯(lián)合信通院、騰訊、清華大學(xué)、鵬程實(shí)驗(yàn)室、華為、中興、銳捷、新華三、中信科、Intel、Marvell、盛科、思博倫等國(guó)內(nèi)外公有云、設(shè)備商、芯片商、測(cè)試儀表商等共同研究了該技術(shù)方案的技術(shù)特性,初步達(dá)成了產(chǎn)業(yè)共識(shí)。
后續(xù)中國(guó)移動(dòng)將繼續(xù)完善技術(shù)方案,加快國(guó)際國(guó)內(nèi)標(biāo)準(zhǔn)化進(jìn)程,加速推動(dòng)產(chǎn)業(yè)生態(tài)成熟,形成完整的生態(tài)鏈,推動(dòng)商用進(jìn)程。



審核編輯 :李倩
-
以太網(wǎng)
+關(guān)注
關(guān)注
41文章
5998瀏覽量
180815 -
數(shù)據(jù)中心
+關(guān)注
關(guān)注
18文章
5649瀏覽量
75012 -
AI
+關(guān)注
關(guān)注
91文章
39779瀏覽量
301375
原文標(biāo)題:以太網(wǎng)一小步,AI網(wǎng)絡(luò)一大步(附白皮書(shū)下載)
文章出處:【微信號(hào):SDNLAB,微信公眾號(hào):SDNLAB】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
一文講清 DHCP 技術(shù)原理,工業(yè)以太網(wǎng)交換機(jī)為什么離不開(kāi)它?
車(chē)載以太網(wǎng)協(xié)議轉(zhuǎn)換器操作教程# 車(chē)載以太網(wǎng)# 轉(zhuǎn)換器# 硬件# 教程# 汽車(chē)# 技術(shù)# 操作
以太網(wǎng)一致性測(cè)試全解析:保障高性能網(wǎng)絡(luò)的關(guān)鍵技術(shù)
NVIDIA Spectrum-X以太網(wǎng)硅光技術(shù)助力AI工廠(chǎng)網(wǎng)絡(luò)創(chuàng)新
Amphenol RaptorLink 64X50 SOSA以太網(wǎng)交換機(jī):下一代網(wǎng)絡(luò)解決方案
醫(yī)廢管理一小步,院感控制一大步。醫(yī)廢收集全流程閉環(huán),為控感和環(huán)境保駕護(hù)航!#醫(yī)療廢物收集車(chē)#醫(yī)療廢物管理
NVIDIA Spectrum-X 以太網(wǎng)交換機(jī)助力 Meta 和 Oracle 加速網(wǎng)絡(luò)性能
移植網(wǎng)絡(luò)PHY芯片驅(qū)動(dòng),如何融入 rt-thread 的網(wǎng)絡(luò)體系,并添加新的以太網(wǎng)類(lèi)型的報(bào)文?
千兆以太網(wǎng)防護(hù):3 步搞定電涌威脅
AI網(wǎng)絡(luò)管理新范式:精要解讀超以太網(wǎng)聯(lián)盟(UEC)1.0 規(guī)范(2025Q2)
車(chē)載網(wǎng)絡(luò)測(cè)試技術(shù)的進(jìn)化之路#CAN #車(chē)載以太網(wǎng) #TSN #時(shí)間敏感網(wǎng)絡(luò)
以太網(wǎng)入門(mén):從零開(kāi)始,掌握以太網(wǎng)基礎(chǔ)知識(shí)!
Modbus轉(zhuǎn)以太網(wǎng)終極方案:三步實(shí)現(xiàn)老舊設(shè)備智能升級(jí)
廣成科技CAN轉(zhuǎn)以太網(wǎng)模塊的作用和應(yīng)用
以太網(wǎng)一小步,AI網(wǎng)絡(luò)一大步
評(píng)論