電子發(fā)燒友網(wǎng)報(bào)道(文/周凱揚(yáng))隨著AI芯片逐漸成為半導(dǎo)體市場(chǎng)的香餑餑,與之相關(guān)的附屬產(chǎn)物也在不斷升值,被一并炒熱。就拿高帶寬內(nèi)存HBM來說,無論是英偉達(dá)的GPU芯片,還是初創(chuàng)公司打造的AI芯片,又或是大型CSP自研的服務(wù)器芯片,都開始引入HBM。
成為新時(shí)代另一主流的HBM
過去HBM主要用于AMD或英偉達(dá)的高端GPU產(chǎn)品中,這與成本息息相關(guān),比如額外的硅中介層、更大的封裝等,增加的系統(tǒng)成本使得HBM只會(huì)出現(xiàn)在一些頂級(jí)消費(fèi)級(jí)產(chǎn)品中,甚至兩者最終都在消費(fèi)級(jí)產(chǎn)品上放棄了HBM,改用于數(shù)據(jù)中心這樣的企業(yè)級(jí)場(chǎng)景。
可隨著人工智能/機(jī)器學(xué)習(xí)的需求驅(qū)動(dòng)這類產(chǎn)品用量增長(zhǎng),內(nèi)存墻的瓶頸開始顯現(xiàn)。我們不再缺超高性能的CPU,缺的反而是超高性能的GPU/AI加速器,以及更高帶寬的內(nèi)存,應(yīng)對(duì)大量低延時(shí)的數(shù)據(jù)移動(dòng)。
所以HBM被認(rèn)為是AI/ML時(shí)代下的首選內(nèi)存,為某些算法提供了訓(xùn)練所需的最大帶寬,比如最近英偉達(dá)公布的第二代Grace Hopper Superchip,就分成了不同GPU內(nèi)存配置的版本,率先推出的是搭載96GB HBM3的版本,明年第二季度將推出搭載144GB HBM3e的版本。
HBM的市場(chǎng)供應(yīng)已經(jīng)發(fā)生變動(dòng)
要說HBM的供應(yīng)商,主要是SK海力士、三星和美光。TrendForce通過當(dāng)下各大供應(yīng)商的生產(chǎn)計(jì)劃數(shù)據(jù)分析,內(nèi)存廠商正在提高其產(chǎn)能,比如擴(kuò)大TSV產(chǎn)線等。預(yù)計(jì)到2024年,HBM供應(yīng)將增加105%。其中SK海力士因?yàn)槭斋@了來自英偉達(dá)的大量訂單,所以尚且占據(jù)頭號(hào)交椅的位置。而在三星的奮起直追下,已經(jīng)拉近了與SK海力士的市占比距離。
三星作為存儲(chǔ)廠商和晶圓代工廠,既提供了HBM方案也提供了對(duì)應(yīng)的多HBM封裝方案,這種一站式的方案也收獲了更多的訂單。根據(jù)韓媒的報(bào)道,三星與可能會(huì)與英偉達(dá)在年末達(dá)成服務(wù)與供應(yīng)協(xié)議,為英偉達(dá)的H100以之后搭載HBM3的芯片提供HBM產(chǎn)能,
至于美光雖然也有HBM產(chǎn)品,但主要優(yōu)勢(shì)還是在傳統(tǒng)內(nèi)存上。可隨著生成式AI一炮走紅之后,美光也開始決心在HBM產(chǎn)品上奮起直追。比如上個(gè)月底,美光就基于其先進(jìn)的1β工藝節(jié)點(diǎn),發(fā)布了業(yè)界首個(gè)8-high 24GB HBM3第二代產(chǎn)品,帶寬可達(dá)1.2TB/s以上,并宣布已經(jīng)開始送樣。
美光也在通稿中專門提到了該HBM產(chǎn)品對(duì)于GPT-4等生成式AI應(yīng)用起到的助力,比如為AI推理提供更高的能效比,以及為運(yùn)營(yíng)者提供更優(yōu)的TCO解決方案。此外,美光已經(jīng)開始準(zhǔn)備12-high的36GB版本,并計(jì)劃于2024年第一季度送樣。
至于HBM的價(jià)格問題,鑒于目前主流芯片用的還是HBM2和HBM2e,且出貨量仍在增加,所以短期內(nèi)不會(huì)有太大的波動(dòng)。不過,TrendForce預(yù)計(jì)隨著HBM3的推出,以及H100等基于HBM3設(shè)計(jì)的AI芯片逐漸面世,老一代HBM內(nèi)存的價(jià)格應(yīng)該會(huì)有所下跌,讓位給ASP價(jià)格更高但性價(jià)比依然有所提升的HBM3。
小結(jié)
盡管HBM以及后續(xù)迭代的版本解決了當(dāng)下AI計(jì)算的內(nèi)存墻問題,但內(nèi)存廠商們考慮到傳統(tǒng)內(nèi)存最近的庫存情況,明顯對(duì)于滿足客戶需求、擴(kuò)大市場(chǎng)份額以及避免產(chǎn)能過剩有了新的權(quán)衡,在產(chǎn)能擴(kuò)張的決策上也會(huì)更加謹(jǐn)慎。
發(fā)布評(píng)論請(qǐng)先 登錄
不同于HBM垂直堆疊,英特爾新型內(nèi)存ZAM技術(shù)采用交錯(cuò)互連拓?fù)浣Y(jié)構(gòu)
JEDEC制定全新內(nèi)存標(biāo)準(zhǔn),將取代HBM?
AI大算力的存儲(chǔ)技術(shù), HBM 4E轉(zhuǎn)向定制化
炸裂!Modbus 轉(zhuǎn) Profinet網(wǎng)關(guān) 連接流量計(jì),能源物流行業(yè)新寵兒誕生!
性能優(yōu)于HBM,超高帶寬內(nèi)存 (X-HBM) 架構(gòu)來了!
光伏氣象監(jiān)測(cè)系統(tǒng):為光伏電站 “把脈” 的智慧管家
想搞定控制器連接?耐達(dá)訊Modbus轉(zhuǎn)Profinet這招你知道嗎?
突破堆疊瓶頸:三星電子擬于16層HBM導(dǎo)入混合鍵合技術(shù)
HBM應(yīng)用在手機(jī)上,可行嗎?
美光12層堆疊36GB HBM4內(nèi)存已向主要客戶出貨
Cadence推出HBM4 12.8Gbps IP內(nèi)存系統(tǒng)解決方案
比肩HBM,SOCAMM內(nèi)存模組即將商業(yè)化
石油機(jī)械新寵兒 旋轉(zhuǎn)式油管測(cè)徑儀
HBM技術(shù)的優(yōu)勢(shì)和應(yīng)用場(chǎng)景
HBM新技術(shù),橫空出世:引領(lǐng)內(nèi)存芯片創(chuàng)新的新篇章
繼續(xù)加大產(chǎn)量,HBM成內(nèi)存廠商的新寵兒
評(píng)論