国产精品久久久aaaa,日日干夜夜操天天插,亚洲乱熟女香蕉一区二区三区少妇,99精品国产高清一区二区三区,国产成人精品一区二区色戒,久久久国产精品成人免费,亚洲精品毛片久久久久,99久久婷婷国产综合精品电影,国产一区二区三区任你鲁

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

大模型時代,國產(chǎn)AI芯片最新進展!算力集群化是必然趨勢

Carol Li ? 來源:電子發(fā)燒友網(wǎng) ? 作者:李彎彎 ? 2023-07-11 09:05 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網(wǎng)報道(文/李彎彎)在剛過去的2023世界人工智能大會上,大模型可以說是其中的大亮點之一,華為盤古、商湯日日新、網(wǎng)易伏羲等30多款國產(chǎn)AI大模型集中亮相。與此同時,各類人工智能芯片公司、算力提供商也針對大模型展示了相應(yīng)的方案。

大模型時代,國產(chǎn)AI芯片進展如何?

在這次大會上,瀚博半導體、燧原科技、登臨科技、天數(shù)智芯等紛紛展示了針對大模型的產(chǎn)品方案,呈現(xiàn)出國產(chǎn)AI芯片在大模型領(lǐng)域的進展情況。

瀚博半導體成立于2018年12月,是一家自研GPU芯片及解決方案提供商。在此次大會上,瀚博發(fā)布了第二代GPU SG100,并推出南禺系列GPU加速卡VG1600、VG1800、VG14,以及LLM大模型AI加速卡VA1L、AIGC大模型一體機、VA12高性能生成式AI加速卡等6款新品。

據(jù)介紹,瀚博SG100芯片采用7nm先進制程,具備業(yè)界領(lǐng)先的渲染性能,同時兼具低延時高吞吐的AI算力和強大的視頻處理能力。

值得關(guān)注的,針對大模型時代算力需求,瀚博本次首發(fā)了LLM大模型AI加速卡VA1L,具備200 TOPS INT8/72 TFLOPS FP16算力,并支持ChatGPT、LLaMA、Stable Diffusion等主流AIGC網(wǎng)絡(luò)模型。

與此同時,瀚博此次還推出了AIGC大模型一體機,共使用8張LLM大模型AI加速卡VA1L,支持512GB顯存,進而支持1750億參數(shù)的大模型。

另外,作為瀚博VA1和VA10的升級版,VA12是一塊通用AI加速卡,支持檢測、分類、分割、視頻增強、語義理解、BERT、Transfomer和視頻編解碼等應(yīng)用。

燧原科技在此次大會上發(fā)布了燧原曜圖文生圖MaaS平臺服務(wù)產(chǎn)品。該產(chǎn)品以燧原科技“邃思”系列芯片為算力支撐,由首都在線提供計算服務(wù),燧原曜圖MaaS平臺服務(wù)產(chǎn)品為用戶提供面向AIGC時代的高效易用、安全可靠、企業(yè)級的文生圖服務(wù)。

燧原科技表示,它具備開箱即用可用、所想即所見、創(chuàng)意無限的文本生成圖像能力,通過軟硬一體方案降低大規(guī)模AIGC應(yīng)用的工程難度與算力成本,開啟AIGC應(yīng)用規(guī)模化落地時代。

燧原科技創(chuàng)始人兼CEO趙立東在某論壇上提到,目前燧原已經(jīng)為大型科研機構(gòu)部署了千卡規(guī)模的AI訓練算力集群,并成功落地;而且與騰訊合作,在OCR文字識別、智能交互、智能會議等方面,性能達到了業(yè)界同類產(chǎn)品兩倍以上,性價比上具有很高優(yōu)勢。此外,在智慧城市方面,燧原完成2022年成都高新區(qū)國產(chǎn)化AI視頻基礎(chǔ)設(shè)施平臺項目建設(shè)。

此次大會上,登臨科技展示了最新一代創(chuàng)新通用GPU產(chǎn)品Goldwasser II系列以及基于開源大語言模型可交互界面。據(jù)了解,Goldwasser II針對基于Transformer和生成式AI 大模型進行專門優(yōu)化,在性能有大幅提升,已于2022年流片,目前已開始規(guī)模化量產(chǎn)和商業(yè)客戶驗證。據(jù)現(xiàn)有客戶測試結(jié)果,二代產(chǎn)品針對基于transformer類型的模型提供3-5倍的性能提升,大幅降低類ChatGPT及生成式AI應(yīng)用的硬件成本。

天數(shù)智芯在此次會上也展示了在大模型訓練、推理所取得的顯著進展,包括圖片識別/以圖搜圖、3D建模、大模型推理等。在大模型領(lǐng)域,天數(shù)智芯今年上半年,搭建了40P算力320張?zhí)燠?00加速卡算力集群,完成智源研究院70億參數(shù)大模型全量訓練,

天垓100是天數(shù)智芯2018年研發(fā)的通用AI訓練芯片,據(jù)天數(shù)智芯董事長蓋魯江介紹,目前天垓100這款產(chǎn)品還已經(jīng)成功跑通了清華智譜 AI 大模型ChatGLM,Meta研發(fā)的LLaMA模型。此外,天數(shù)智芯正在幫智源研究院跑650億參數(shù)的模型,預計10月份可以跑完。

針對于A800芯片在無許可證的情況下將被禁售的話題,蓋魯江談到,事實上,不管英偉達的產(chǎn)品能不能賣給中國,我們的產(chǎn)品已經(jīng)能夠用起來了。

算力集群化是發(fā)展趨勢

伴隨大模型帶來的生成式AI突破,人工智能正在進入一個新的時代。算力是人工智能產(chǎn)業(yè)創(chuàng)新的基礎(chǔ),大模型的持續(xù)創(chuàng)新,驅(qū)動算力需求的爆炸式增長。可以說,大模型訓練的效率或者是創(chuàng)新的速度,根本上取決于算力的大小。

然而,中國的算力已經(jīng)成為一個越來越稀缺的資源。華為輪值董事長胡厚崑在某論壇上談到,大模型的研發(fā)高度依賴高端AI芯片、集群及生態(tài)。高計算性能、高通信帶寬和大顯存成為大模型訓練必不可少的算力底座,單AI芯片進步速度還未跟上大模型對大算力的需求,算力集群化成為不可逆轉(zhuǎn)的發(fā)展趨勢。

在2023世界人工智能大會上,華為宣布昇騰AI集群全面升級,集群規(guī)模從最初的4000卡集群擴展至16000卡,擁有更快的訓練速度和30天以上的穩(wěn)定訓練周期。

胡厚崑表示,華為在各個單點創(chuàng)新的基礎(chǔ)上,充分發(fā)揮云、計算、存儲、網(wǎng)絡(luò)以及能源的綜合優(yōu)勢,進行架構(gòu)創(chuàng)新,推出了昇騰AI集群,相當于把AI算力中心當成一臺超級計算機來設(shè)計,使得昇騰AI集群性能更高,并且可靠性更高。

據(jù)他介紹,昇騰AI集群目前已經(jīng)可以達到10%以上的大模型訓練效率的提升,可以提供10倍以上的系統(tǒng)穩(wěn)定的提高,支持長期穩(wěn)定訓練。

華為昇騰計算業(yè)務(wù)總裁張迪煊表示,基于昇騰AI,原生孵化和適配了30多個大模型,到目前為止,中國有一半左右的大模型創(chuàng)新,都是由昇騰AI來支持的。

除了華為,阿里、騰訊等也打造了較大的算力集群,不過主要還是依靠英偉達的GPU芯片。阿里云表示,其擁有國內(nèi)最強的智能算力儲備,智算集群可支持最大十萬卡GPU規(guī)模,承載多個萬億參數(shù)大模型同時在線訓練。

騰訊云此前大量采購了英偉達A100/H800芯片,發(fā)布新一代HCC高性能計算集群,用于大模型訓練、自動駕駛、科學計算等領(lǐng)域。基于新一代集群,騰訊團隊在同等數(shù)據(jù)集下,將萬億參數(shù)的AI大模型混元NLP訓練由50天縮短到4天。

小結(jié)

無論是大模型的訓練,還是后期的推理部署,對算力的需求都相當大。雖然,當前國產(chǎn)AI芯片與國際領(lǐng)先GPU產(chǎn)品在大模型的訓練上有差距,不過可以看到,已經(jīng)有不少產(chǎn)品,在較大模型的訓練上已經(jīng)取得成績,后續(xù)必然還會有更大的進展。同時,為了滿足大模型對大算力的需求,算力集群化將會是未來趨勢。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    91

    文章

    39489

    瀏覽量

    300678
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    華為領(lǐng)銜,三劍客入局!十萬卡智集群落地,國產(chǎn)芯片強勢崛起

    的“驅(qū)動燃料”。中移動在現(xiàn)場展示了“國芯國連”AI集群,移動云磐石智交換機、超級點AI
    的頭像 發(fā)表于 10-14 09:30 ?1.4w次閱讀
    華為領(lǐng)銜,三劍客入局!十萬卡智<b class='flag-5'>算</b><b class='flag-5'>集群</b>落地,<b class='flag-5'>國產(chǎn)</b><b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>芯片</b>強勢崛起

    國芯科技DPNPU新IP產(chǎn)品最新進展,單核支持0.5~4.8TOPS靈活配置

    國芯科技DPNPU新IP產(chǎn)品 最新進展,單核支持0.5~4.8TOPS 靈活配置 ? 電子發(fā)燒友網(wǎng)綜合報道 國芯科技發(fā)布公告稱,其自主研發(fā)的神經(jīng)網(wǎng)絡(luò)處理器DPNPU(Dataflow
    的頭像 發(fā)表于 01-09 09:19 ?1837次閱讀
    國芯科技DPNPU新IP產(chǎn)品<b class='flag-5'>最新進展</b>,單核支持0.5~4.8TOPS靈活<b class='flag-5'>算</b><b class='flag-5'>力</b>配置

    從協(xié)議到實踐——EtherNet/IP與NetStaX的最新進展

    從協(xié)議到實踐——EtherNet/IP與NetStaX的最新進展
    的頭像 發(fā)表于 12-19 15:26 ?1460次閱讀
    從協(xié)議到實踐——EtherNet/IP與NetStaX的<b class='flag-5'>最新進展</b>

    芯科科技分享在物聯(lián)網(wǎng)領(lǐng)域的最新進展

    Labs(芯科科技)亞太區(qū)業(yè)務(wù)副總裁王祿銘、中國大陸區(qū)總經(jīng)理周巍及臺灣區(qū)總經(jīng)理寶陸格就公司技術(shù)路線、產(chǎn)品策略及市場趨勢回答了媒體提問。三位高管圍繞安全認證、無線連接、邊緣計算等議題,介紹了公司在物聯(lián)網(wǎng)領(lǐng)域的最新進展
    的頭像 發(fā)表于 11-13 10:48 ?1578次閱讀

    國產(chǎn)AI芯片真能扛住“內(nèi)卷”?海思昇騰的這波操作藏了多少細節(jié)?

    最近行業(yè)都在說“AI的命門”,但國產(chǎn)芯片真的能接住這波需求嗎? 前陣子接觸到海思昇騰910B,實測下來有點超出預期——7nm工藝下
    發(fā)表于 10-27 13:12

    “超節(jié)點+集群”:華為撞出來的之路

    “超節(jié)點+集群”,成為徹底解決AI困局的契機
    的頭像 發(fā)表于 09-24 10:55 ?1123次閱讀
    “超節(jié)點+<b class='flag-5'>集群</b>”:華為撞出來的<b class='flag-5'>算</b><b class='flag-5'>力</b>之路

    壁仞科技聯(lián)合三方打造國產(chǎn)集群落地

    近日,由浙江聯(lián)通、壁仞科技、中興通訊、優(yōu)云科技四方聯(lián)合打造的國產(chǎn)集群,在浙江烏鎮(zhèn)智中心正式點亮。該
    的頭像 發(fā)表于 08-01 15:26 ?1447次閱讀

    一文看懂AI集群

    最近這幾年,AI浪潮席卷全球,成為整個社會的關(guān)注焦點。大家在討論AI的時候,經(jīng)常會提到AI集群
    的頭像 發(fā)表于 07-23 12:18 ?1525次閱讀
    一文看懂<b class='flag-5'>AI</b><b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>集群</b>

    百度在AI領(lǐng)域的最新進展

    近日,我們在武漢舉辦了Create2025百度AI開發(fā)者大會,與全球各地的5000多名開發(fā)者,分享了百度在AI領(lǐng)域的新進展
    的頭像 發(fā)表于 04-30 10:14 ?1294次閱讀

    6TOPSNPU加持!RK3588如何重塑8K顯示的邊緣計算新邊界

    在萬物互聯(lián)的時代背景下,邊緣計算與8K顯示的融合需求日益迫切。傳統(tǒng)的云端處理模式在面對8K超高清視頻數(shù)據(jù)時,常常出現(xiàn)延遲高、帶寬壓力大等問題,而邊緣計算設(shè)備由于有限,難以支撐8K視頻的實時解碼
    發(fā)表于 04-18 15:32

    谷歌Gemini API最新進展

    體驗的 Live API 的最新進展,以及正式面向開發(fā)者開放的高質(zhì)量視頻生成工具 Veo 2。近期,我們面向在 Google AI Studio 中使用 Gemini API 的開發(fā)者推出了許多不容錯過的重要更新,一起來看看吧。
    的頭像 發(fā)表于 04-12 16:10 ?1639次閱讀

    華為公布AI基礎(chǔ)設(shè)施架構(gòu)突破性新進展

    近日,華為公司常務(wù)董事、華為云計算CEO張平安在華為云生態(tài)大會2025上公布了AI基礎(chǔ)設(shè)施架構(gòu)突破性新進展——推出基于新型高速總線架構(gòu)的CloudMatrix 384超節(jié)點集群,并宣布已在蕪湖數(shù)據(jù)中心規(guī)模上線。
    的頭像 發(fā)表于 04-12 15:09 ?1924次閱讀

    DeepSeek推動AI需求:800G光模塊的關(guān)鍵作用

    的100G光模塊已無法滿足高效能AI訓練和推理所需的大規(guī)模數(shù)據(jù)傳輸。為了應(yīng)對這一挑戰(zhàn),400G、800G乃至1.6T光模塊的出現(xiàn)成為行業(yè)必然趨勢。特別是隨著DeepSeek等模型的規(guī)模擴大,如何提升
    發(fā)表于 03-25 12:00

    京東方華燦光電氮化鎵器件的最新進展

    日前,京東方華燦的氮化鎵研發(fā)總監(jiān)馬歡應(yīng)半導體在線邀請,分享了關(guān)于氮化鎵器件的最新進展,引起了行業(yè)的廣泛關(guān)注。隨著全球半導體領(lǐng)域?qū)Ω咝阅堋⒏咝势骷男枨蟛粩嗉哟螅墸℅aN)技術(shù)逐漸成為新一代電子器件的熱點,其優(yōu)越的性能使其在電源轉(zhuǎn)換和射頻應(yīng)用中展現(xiàn)出巨大的潛力。
    的頭像 發(fā)表于 03-13 11:44 ?1672次閱讀

    垂直氮化鎵器件的最新進展和可靠性挑戰(zhàn)

    過去兩年中,氮化鎵雖然發(fā)展迅速,但似乎已經(jīng)遇到了瓶頸。與此同時,不少垂直氮化鎵的初創(chuàng)企業(yè)倒閉或者賣盤,這引發(fā)大家對垂直氮化鎵未來的擔憂。為此,在本文中,我們先對氮化鎵未來的發(fā)展進行分析,并討論了垂直氮化鎵器件開發(fā)的最新進展以及相關(guān)的可靠性挑戰(zhàn)。
    的頭像 發(fā)表于 02-17 14:27 ?2170次閱讀
    垂直氮化鎵器件的<b class='flag-5'>最新進展</b>和可靠性挑戰(zhàn)