來(lái)源:慧榮科技
隨著人工智能技術(shù)的爆發(fā)式增長(zhǎng),數(shù)據(jù)不僅在數(shù)量上呈現(xiàn)指數(shù)級(jí)飛躍,其存在形態(tài)與交互模式也發(fā)生了根本性的轉(zhuǎn)變。在當(dāng)今的計(jì)算架構(gòu)中,數(shù)據(jù)不再僅僅是靜止存放于倉(cāng)庫(kù)中的“貨物”,而是變成了一條高速流動(dòng)的“管道”。從邊緣設(shè)備的實(shí)時(shí)采集,到核心數(shù)據(jù)中心的高強(qiáng)度訓(xùn)練,再到最終端的推理應(yīng)用,每一個(gè)環(huán)節(jié)都對(duì)數(shù)據(jù)流轉(zhuǎn)的速度提出了嚴(yán)苛要求。

然而,當(dāng)前的計(jì)算架構(gòu)面臨著一種不對(duì)稱(chēng)的挑戰(zhàn):雖然GPU的算力正在以摩爾定律的速度狂飆,但作為基礎(chǔ)設(shè)施底座的存儲(chǔ)系統(tǒng),若無(wú)法跟上數(shù)據(jù)流動(dòng)的步伐,便會(huì)成為制約整體性能的瓶頸。一旦存儲(chǔ)響應(yīng)滯后,昂貴的GPU計(jì)算資源將被迫處于閑置等待狀態(tài)。因此,構(gòu)建一個(gè)能夠匹配AI算力需求、拒絕“堵車(chē)”的高效數(shù)據(jù)存儲(chǔ)管道,已成為釋放AI潛能的關(guān)鍵所在。
#01痛點(diǎn)解析
什么在阻礙AI數(shù)據(jù)的流動(dòng)?
深入剖析AI的全生命周期,可以發(fā)現(xiàn)其工作負(fù)載具有極高的復(fù)雜性。一個(gè)完整的AI任務(wù)通常包含數(shù)據(jù)攝取(Ingestion)、數(shù)據(jù)準(zhǔn)備(Preparation)、模型訓(xùn)練(Training)和模型推理(Inference)等多個(gè)階段,而每個(gè)階段對(duì)存儲(chǔ)系統(tǒng)的讀寫(xiě)需求截然不同:
數(shù)據(jù)攝取階段:面臨海量非結(jié)構(gòu)化數(shù)據(jù)的涌入,要求存儲(chǔ)系統(tǒng)具備極高的循序?qū)懭胪掏铝俊?/p>
模型訓(xùn)練階段:GPU集群需要頻繁地以極低延遲進(jìn)行隨機(jī)讀取,同時(shí)還需要定期進(jìn)行高帶寬的檢查點(diǎn)(Checkpoint)寫(xiě)入,以保存訓(xùn)練進(jìn)度。
推理應(yīng)用階段:則對(duì)系統(tǒng)的響應(yīng)速度和低延遲有著極致的追求。
在實(shí)際的數(shù)據(jù)中心環(huán)境中,上述這些任務(wù)并非孤立執(zhí)行,往往是多租戶(hù)、多任務(wù)并行處理。這就導(dǎo)致了嚴(yán)重的“IO混合效應(yīng)”(IO Blending)。當(dāng)大帶寬的順序?qū)懭耄ㄈ鐢?shù)據(jù)清洗或檢查點(diǎn)保存)與對(duì)延遲敏感的隨機(jī)讀取(如推理或訓(xùn)練采樣)同時(shí)發(fā)生時(shí),存儲(chǔ)介質(zhì)內(nèi)部會(huì)產(chǎn)生劇烈的資源爭(zhēng)奪。這種無(wú)序的競(jìng)爭(zhēng)會(huì)導(dǎo)致性能抖動(dòng),顯著增加延遲,進(jìn)而打斷GPU的流水線操作。這種由IO沖突引發(fā)的效率損耗,正是當(dāng)前阻礙AI數(shù)據(jù)高效流動(dòng)的主要癥結(jié)。
#02技術(shù)破局
從“交通管制”到“智能收納”
面對(duì)復(fù)雜的IO混合難題,慧榮科技通過(guò)一系列前沿的固件算法與架構(gòu)創(chuàng)新,從物理底層到邏輯層面對(duì)SSD技術(shù)進(jìn)行了重塑。
1用“交通管制”解決數(shù)據(jù)擁堵(PerformaShape)
針對(duì)多租戶(hù)環(huán)境下的資源沖突問(wèn)題,慧榮科技推出了專(zhuān)有的PerformaShape技術(shù)。
PerformaShape利用基于硬件的隔離機(jī)制和先進(jìn)的QoS(服務(wù)質(zhì)量)算法,能夠識(shí)別不同類(lèi)型的AI工作負(fù)載。它允許系統(tǒng)為關(guān)鍵任務(wù)(如實(shí)時(shí)推理或高優(yōu)先級(jí)訓(xùn)練)預(yù)留專(zhuān)用帶寬,相當(dāng)于開(kāi)辟了“專(zhuān)用車(chē)道”。即使在數(shù)據(jù)寫(xiě)入最為密集的時(shí)刻,該技術(shù)也能確保關(guān)鍵的讀取任務(wù)不受干擾,從而在極端的混合工作負(fù)載下,依然保持存儲(chǔ)性能的確定性和低延遲,徹底解決“嘈雜鄰居”(Noisy Neighbor)帶來(lái)的干擾問(wèn)題。
2用“智能收納”提升讀寫(xiě)效率(ZNS&FDP)
為了進(jìn)一步提升存儲(chǔ)介質(zhì)的利用率與壽命,慧榮科技深度應(yīng)用了ZNS(區(qū)域命名空間)與FDP(靈活數(shù)據(jù)放置)技術(shù)。

傳統(tǒng)的SSD往往像一個(gè)黑盒,主機(jī)無(wú)法控制數(shù)據(jù)在閃存上的具體落點(diǎn),導(dǎo)致大量無(wú)效的數(shù)據(jù)搬運(yùn)(即寫(xiě)放大,WAF)。而FDP與ZNS技術(shù)則讓主機(jī)系統(tǒng)能夠“看懂”SSD的物理布局。這就好比在這個(gè)巨大的“數(shù)據(jù)圖書(shū)館”中,實(shí)施了“智能收納”策略,將具有相同生命周期或訪問(wèn)頻率的數(shù)據(jù)直接放置在物理上相鄰的區(qū)域。這種機(jī)制不僅大幅降低了SSD內(nèi)部的寫(xiě)放大,顯著延長(zhǎng)了閃存(尤其是 QLC)的使用壽命,更通過(guò)減少后臺(tái)垃圾回收的干擾,進(jìn)一步降低了讀寫(xiě)延遲,確保數(shù)據(jù)管道始終暢通無(wú)阻。
#03解決方案
MonTitan平臺(tái)與SM8366主控芯片
上述一系列突破性技術(shù)的落地,離不開(kāi)強(qiáng)大的硬件載體。慧榮科技打造的MonTitan PCIe Gen5 SSD開(kāi)發(fā)平臺(tái),正是為AI時(shí)代量身定制的解決方案。
作為該平臺(tái)的核心引擎,SM8366主控芯片集成了16通道設(shè)計(jì),支持高速PCIe Gen5接口。它不僅能夠提供高達(dá)14GB/s的順序讀取速度和超過(guò)300萬(wàn)IOPS的隨機(jī)性能,更重要的是,它完美支持了PerformaShape、FDP、ZNS等先進(jìn)特性。此外,針對(duì)AI訓(xùn)練對(duì)海量數(shù)據(jù)集的需求,SM8366 主控芯片支持高達(dá)128TB的單盤(pán)容量,為構(gòu)建高性能、高密度、低功耗的 AI 數(shù)據(jù)中心提供了最佳基石。
在AI競(jìng)賽日益白熱化的今天,存儲(chǔ)技術(shù)的革新已成為決定算力效率的關(guān)鍵變量。慧榮科技致力于通過(guò)從核心數(shù)據(jù)中心到邊緣設(shè)備的持續(xù)存儲(chǔ)創(chuàng)新,以先進(jìn)的主控芯片技術(shù)和解決方案,幫助企業(yè)構(gòu)建安全、高效的數(shù)據(jù)基礎(chǔ)設(shè)施,最大化AI時(shí)代的投資回報(bào)。
-
存儲(chǔ)
+關(guān)注
關(guān)注
13文章
4819瀏覽量
90149 -
AI
+關(guān)注
關(guān)注
91文章
40260瀏覽量
301867 -
慧榮科技
+關(guān)注
關(guān)注
0文章
75瀏覽量
16539
原文標(biāo)題:【會(huì)員風(fēng)采】拒絕“擁堵”!慧榮科技以創(chuàng)新技術(shù)破解AI數(shù)據(jù)管道IO混合難題
文章出處:【微信號(hào):qidianxiehui,微信公眾號(hào):深圳市汽車(chē)電子行業(yè)協(xié)會(huì)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
MediaTek創(chuàng)新技術(shù)讓AI真正走進(jìn)生活
慧榮科技于Embedded World 2026展示AI優(yōu)化的啟動(dòng)存儲(chǔ)與企業(yè)級(jí)解決方案
潤(rùn)和軟件AI質(zhì)檢平臺(tái)以智能化手段破解圖文比對(duì)難題
高通推出完整的AI驅(qū)動(dòng)RAN創(chuàng)新技術(shù)組合
Altair CFD 以技術(shù)賦能工程創(chuàng)新?
軟通動(dòng)力攜手中國(guó)誠(chéng)通破解多業(yè)態(tài)財(cái)務(wù)風(fēng)險(xiǎn)管理難題
慧榮科技躋身科睿唯安“2026全球百?gòu)?qiáng)創(chuàng)新機(jī)構(gòu)”榜單,AI存儲(chǔ)技術(shù)獲國(guó)際認(rèn)可
華為發(fā)布并開(kāi)源創(chuàng)新AI容器技術(shù)Flex:ai
慧榮科技宣布推出SM8388,業(yè)界領(lǐng)先的高能效PCIe Gen5企業(yè)SSD主控芯片
睿海光電領(lǐng)航AI光模塊:超快交付與全場(chǎng)景兼容賦能智算時(shí)代——以創(chuàng)新實(shí)力助力全球客戶(hù)構(gòu)建高效算力底座
今日看點(diǎn)丨華為發(fā)布AI推理創(chuàng)新技術(shù)UCM;比亞迪汽車(chē)出口暴增130%
實(shí)時(shí)監(jiān)測(cè)技術(shù)如何破解高溫巡檢難題
村田中國(guó)亮相2025開(kāi)放計(jì)算創(chuàng)新技術(shù)大會(huì):以創(chuàng)新技術(shù)驅(qū)動(dòng)智能化發(fā)展
破解高密散熱難題, 維諦技術(shù)(Vertiv) 360AI混合制冷方案重塑AI時(shí)代熱管理
慧榮科技以創(chuàng)新技術(shù)破解AI數(shù)據(jù)管道IO混合難題
評(píng)論