国产精品久久久aaaa,日日干夜夜操天天插,亚洲乱熟女香蕉一区二区三区少妇,99精品国产高清一区二区三区,国产成人精品一区二区色戒,久久久国产精品成人免费,亚洲精品毛片久久久久,99久久婷婷国产综合精品电影,国产一区二区三区任你鲁

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

摩爾線程與無問芯穹宣布完成基于GPU千卡集群的3B規模大模型實訓

摩爾線程 ? 來源:摩爾線程 ? 2024-05-27 10:44 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

摩爾線程聯合無問芯穹宣布,雙方已在本周正式完成基于國產全功能GPU千卡集群的3B規模大模型實訓。該模型名為“MT-infini-3B”,在摩爾線程夸娥(KUAE)千卡智算集群與無問芯穹AIStudio PaaS平臺上完成了高效穩定的訓練。

本次實訓充分驗證了夸娥千卡智算集群在大模型訓練場景下的可靠性,同時也在行業內率先開啟了國產大語言模型與國產GPU千卡智算集群深度合作的新范式。

MT-infini-3B模型訓練總用時13.2天,經過精度調試,實現全程穩定訓練不中斷,集群訓練穩定性達到100%,千卡訓練和單機相比擴展效率超過90%。目前,實訓出來的MT-infini-3B性能在同規模模型中躋身前列,相比在國際主流硬件上訓練而成的其他模型,在C-Eval,MMLU,CMMLU等3個測試集上均實現性能領先。

0bb4d878-1a48-11ef-b74b-92fbcf53809c.png

MT-infini-3B性能表現

無問芯穹聯合創始人兼CEO夏立雪表示:“國內大模型與國產芯片的軟硬件協同發展,最終目標是構建一個成熟的生態系統。無問芯穹正在打造‘M種模型’和‘N種芯片’間的‘M×N’中間層產品,實現多種大模型算法在多元芯片上的高效、統一部署。摩爾線程是第一家接入無問芯穹并進行千卡級別大模型訓練的國產GPU公司,而‘MT-infini-3B’的訓練是行業內首次實現基于國產GPU芯片從0到1的端到端大模型實訓案例。”

摩爾線程創始人兼CEO張建中表示:“無問芯穹在夸娥千卡智算集群上實現的從零開始的大模型訓練,不僅是對摩爾線程技術實力的有力認證,更是實現了國內大模型訓練的國產化閉環。摩爾線程夸娥千卡智算集群以全功能GPU為底座,提供軟硬一體化的全棧解決方案,具備高兼容性、高穩定性、高擴展性等綜合優勢,我們致力于成為AGI時代大模型訓練堅實可靠的先進基礎設施。”

此前,摩爾線程與無問芯穹已達成深度戰略合作。無問芯穹大模型開發與服務平臺“無穹Infini-AI”和摩爾線程大模型智算千卡集群夸娥已完成系統級融合適配,該平臺可以靈活調用夸娥的集群能力以完成大模型的訓練、微調與推理任務。未來,雙方還將開展更多適配與測試,推動國產大模型技術的快速發展與應用普及,為中國人工智能產業的蓬勃發展貢獻力量。



審核編輯:劉清

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • GPU芯片
    +關注

    關注

    1

    文章

    307

    瀏覽量

    6516
  • 摩爾線程
    +關注

    關注

    2

    文章

    279

    瀏覽量

    6450
  • 大模型
    +關注

    關注

    2

    文章

    3650

    瀏覽量

    5179

原文標題:摩爾線程攜手無問芯穹:基于夸娥千卡智算集群的“MT-infini-3B”大模型實訓已完成

文章出處:【微信號:moorethreads,微信公眾號:摩爾線程】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    沐曦股份曦云C系列GPU全面適配通義Qwen3.5三款新模型

    今日,通義團隊正式開源發布Qwen3.5系列中等規模模型,推出包括Qwen3.5-35B-A3B、Qwen3.5-122
    的頭像 發表于 02-28 10:05 ?399次閱讀
    沐曦股份曦云C系列<b class='flag-5'>GPU</b>全面適配通義<b class='flag-5'>千</b><b class='flag-5'>問</b>Qwen3.5三款新<b class='flag-5'>模型</b>

    摩爾線程MTT S5000全面適配Qwen3.5三款新模型

    繼開源Qwen3.5-397B-A17B之后,阿里再次宣布開源3.5最新三款中等規模模型:Q
    的頭像 發表于 02-26 16:23 ?351次閱讀

    沐曦股份曦云C系列GPU深度適配通義Qwen3.5模型

    今天,通義今天正式發布 Qwen3.5,并推出Qwen3.5系列的第一款模型 Qwen3.5-397B-A17B 的開放權重版本。沐曦股份曦云C系列
    的頭像 發表于 02-26 14:26 ?416次閱讀
    沐曦股份曦云C系列<b class='flag-5'>GPU</b>深度適配通義<b class='flag-5'>千</b><b class='flag-5'>問</b>Qwen3.5<b class='flag-5'>模型</b>

    摩爾線程快速完成對Qwen3.5模型全面適配

    2月17日,摩爾線程宣布已在旗艦級AI推一體全功能GPU MTT S5000上完成對阿里最新大
    發表于 02-18 08:32 ?168次閱讀

    摩爾線程MTT S5000率先完成對GLM-5的適配

    2月11日,智譜正式發布新一代大模型GLM-5。摩爾線程基于SGLang推理框架,在旗艦級AI推一體全功能GPU MTT S5000上,D
    的頭像 發表于 02-12 10:34 ?651次閱讀
    <b class='flag-5'>摩爾</b><b class='flag-5'>線程</b>MTT S5000率先<b class='flag-5'>完成</b>對GLM-5的適配

    國產算力首證具身大腦模型訓練實力:摩爾線程聯合智源研究院完成RoboBrain 2.5全流程訓練

    隨著具身智能成為人工智能的下一個戰略高地,底層算力底座的自主可控顯得尤為關鍵。近日,摩爾線程聯合北京智源人工智能研究院(以下簡稱:智源)基于FlagOS-Robo框架,依托 MTT S5000 千卡
    的頭像 發表于 01-14 09:05 ?504次閱讀
    國產算力首證具身大腦<b class='flag-5'>模型</b>訓練實力:<b class='flag-5'>摩爾</b><b class='flag-5'>線程</b>聯合智源研究院<b class='flag-5'>完成</b>RoboBrain 2.5全流程訓練

    人工智能千卡集群正式簽約入駐新疆算力中心

    在“東數西算”國家工程全面推進的大背景下,新疆憑借其豐富的清潔能源和獨特的區位優勢,正迅速崛起為國家級算力網絡的關鍵樞紐。近日,墨人工智能(以下簡稱“墨”)的千卡集群正式簽約入駐新
    的頭像 發表于 12-30 17:27 ?690次閱讀

    摩爾線程攜手生態合作伙伴打造的AI教育基地啟用

    近日,摩爾線程攜手科大訊飛等生態合作伙伴打造的AI教育基地在江蘇省錫山高級中學(以下簡稱“省錫中”)正式啟用。作為無錫市惠山區首個落地的AI教育
    的頭像 發表于 09-08 14:43 ?1423次閱讀

    阿里通義發布小尺寸模型Qwen3-4B,手機也能跑

    電子發燒友網綜合報道 8月7日,阿里通義宣布發布更小尺寸新模型——Qwen3-4B-Instruct-2507和Qwen
    的頭像 發表于 08-12 17:15 ?6710次閱讀
    阿里通義<b class='flag-5'>千</b><b class='flag-5'>問</b>發布小尺寸<b class='flag-5'>模型</b>Qwen<b class='flag-5'>3-4B</b>,手機也能跑

    摩爾線程吳慶詳解 MUSA 軟件棧:以技術創新釋放 KUAE 集群潛能,引領 GPU 計算新高度?

    的分享。GPU 計算軟件開發總監吳慶登上講臺,發表了題為《摩爾線程 MUSA 軟件棧助力 KUAE 集群釋放無限潛能》的演講。他從專業視角出發,為在場聽眾深入剖析了 MUSA 軟件棧在
    的頭像 發表于 07-28 13:47 ?6078次閱讀
    <b class='flag-5'>摩爾</b><b class='flag-5'>線程</b>吳慶詳解 MUSA 軟件棧:以技術創新釋放 KUAE <b class='flag-5'>集群</b>潛能,引領 <b class='flag-5'>GPU</b> 計算新高度?

    摩爾線程GPU率先支持Qwen3全系列模型

    近日,阿里云正式發布Qwen3系列的8款開源混合推理模型摩爾線程團隊在模型發布當天,率先完成
    的頭像 發表于 05-07 15:24 ?1020次閱讀

    壁仞科技完成阿里巴巴通義Qwen3全系列模型支持

    4月29日,阿里巴巴通義發布并開源8款新版Qwen3系列“混合推理模型”(簡稱“Qwen3”)。Qwen
    的頭像 發表于 04-30 15:19 ?1584次閱讀

    摩爾線程GPU成功適配Deepseek-V3-0324大模型

    架構和全功能GPU的強大技術實力,摩爾線程迅速響應并完成了對DeepSeek-V3的無縫升級,實現了零報錯、零兼容性問題的光速部署,充分展
    的頭像 發表于 03-31 11:34 ?1274次閱讀
    <b class='flag-5'>摩爾</b><b class='flag-5'>線程</b><b class='flag-5'>GPU</b>成功適配Deepseek-V<b class='flag-5'>3</b>-0324大<b class='flag-5'>模型</b>

    摩爾線程與當虹科技達成深度合作

    近日,摩爾線程與當虹科技達成深度合作,基于國產GPU成功完成了與BlackEye多模態視聽大模型的深度融合。雙方聯手打造專業級視聽“引擎”,
    的頭像 發表于 03-20 15:22 ?1499次閱讀

    摩爾線程支持阿里云通義QwQ-32B開源模型

    近日,阿里云團隊正式開源全新推理模型——通義QwQ-32B摩爾線程在該
    的頭像 發表于 03-07 17:48 ?1353次閱讀
    <b class='flag-5'>摩爾</b><b class='flag-5'>線程</b>支持阿里云通義<b class='flag-5'>千</b><b class='flag-5'>問</b>QwQ-32<b class='flag-5'>B</b>開源<b class='flag-5'>模型</b>