国产精品久久久aaaa,日日干夜夜操天天插,亚洲乱熟女香蕉一区二区三区少妇,99精品国产高清一区二区三区,国产成人精品一区二区色戒,久久久国产精品成人免费,亚洲精品毛片久久久久,99久久婷婷国产综合精品电影,国产一区二区三区任你鲁

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

訊飛星辰MaaS平臺實現高性能DeepSeek V3上線

訊飛開放平臺 ? 來源:訊飛開放平臺 ? 2025-06-04 10:15 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

以DeepSeek模型為代表的MoE技術路線,正不斷突破通用大模型的效果上限。其創新的PD優化與大EP推理方案,推動大模型邁向“高性能、低成本、強普惠”的新階段。

事實上,早在1991年,兩位人工智能界的泰斗Michael Jordan與Geoffrey Hinton在論文《Adaptive Mixture of Local Experts》中,就首次提出了MoE框架。隨著大模型應用場景愈加復雜和垂直,大模型參數增大的同時,消耗的算力資源和時間成本也隨之增加。憑借“稀疏激活、低資源消耗、高模型容量”的優勢,MoE逐漸成為大模型開發者的新寵。

DeepSeek模型的成功實踐,為MaaS平臺廠商指明了方向,也帶來了挑戰:如何在提供高性能大模型推理服務的同時,實現對成本的極致控制?四月份,科大訊飛技術團隊通過深度解析DeepSeek-V3 / R1 推理系統成本,發現除了極致的推理性能及吞吐優化外,大模型成本與算力資源有效利用率、首響用戶體驗等體系化的綜合策略緊密關聯。

基于以上洞察,訊飛星辰MaaS平臺成功復現了生產級PD(生產部署優化)+大EP(大規模跨節點專家并行),實現了高性能的DeepSeek V3上線:

萬路并發保障:大規模并發場景下,系統穩定、延遲低,用戶體驗更流暢;

請求級指標提升 :TTFT(首Token延遲)性能提升30%,TPOT(單Token生成時間)性能提升35%,顯著減少延遲,降低用戶「等候感」;

彈性混合云架構:支持多源異構算力調度,靈活應對流量波峰波谷。

高性能DeepSeek V3上線:

萬路并發無壓力,批量處理享半價

訊飛星辰 MaaS 平臺始終致力于打造高效、穩定、低成本的大模型推理服務。目前平臺上提供星火全系列,以及DeepSeek、Qwen3等共50+個行業主流模型。在對DeepSeek V3推理系統成本進行深度分析基礎上,實現了DeepSeek V3推理性能的階躍:

關鍵指標對齊官網,萬路并發流暢響應

實現生產級PD+大EP復現,極致壓榨硬件性能,TTFT、TPOT等關鍵指標對齊DeepSeek官網,其中TTFT性能提升30%,TPOT性能提升35%。大規模生產集群吞吐再翻倍,即使在萬級并發壓力下,依然能保持低延遲與流暢響應。

Batch API升級,高效低價數據處理

重點升級了支持DeepSeek V3的Batch API,為需要處理大規模數據且非實時場景的任務,如:企業級數據分析、內容生產、客戶反饋處理等,提供高性價比推理服務且無并發限制,可實現價格比傳統調用降低50%,并在24小時內完成任務處理。

彈性混合云架構,流量洪峰更有保障

星辰MaaS平臺自研了彈性多源異構混合云架構,以自建算力為中心擴展接入多個混合算力,提供穩定可靠的算力保障用戶的流量洪峰,確保服務的穩定性。 針對有大量調用需求的開發者和企業,訊飛星辰MaaS平臺提供了專人對接的定制化方案。

模型工具升級:

精調方案隨心用,500+開源模型自主托管

為進一步降低模型定制門檻,助力開發者快速創新,在提供高性能開源模型的同時,近期,訊飛星辰MaaS平臺實現了多項功能上新:精調方案共享:開放數據分類、表格問答、劇本生成等多個精調方案,零門檻上手,開箱即用,可快速落地在真實業務場景中。

星辰MaaS平臺提供了多種精調方案

以營銷創作腳本為例,用戶只需輸入推廣場景、產品賣點、腳本風格、面向人群等資料,即可實現從「創意構思」到「爆款腳本」的全鏈路智能化生產。

Qwen3全系上線:繼率先支持Qwen3旗艦模型Qwen3-235B-A22B和Qwen3-30B-A3B推理之后,目前Qwen3全系模型均已在星辰MaaS平臺上線,支持推理/訓練,為開發者提供了更為多元的模型選擇空間。

開放自主托管渠道:支持開發者自主托管開源模型,包括HuggingFace提供的開源模型(500+)及平臺預置模型,均可一鍵部署,即用即銷,進一步降低了開發成本,使開發者和企業得以專注于業務邏輯創新,推動AI創新應用落地。

開發者可在“模型選擇”中搜索HuggingFace提供的開源模型平臺預置模型

秉承開放開源理念,下一步,星辰MaaS平臺將開源面向大規模生產級的支持PD調度的集群鏡像方案,實現拓撲感知調度,兼容SGlang、自研等多種推理框架、自帶多源異構彈性混合云調度,支持訓推一體潮汐調度,進一步降低多模型、多算力、高并發的大模型集群部署復雜度。

關于訊飛星辰MaaS平臺:

低門檻一站式大模型精調訓練平臺,助力企業高效構建專屬大模型。

開箱即用,上手快:覆蓋數據工程、精調訓練、推理服務等全生命周期工具鏈,提供開箱即用、即用即銷的平臺服務能力。

模型豐富,應用快:支持星火全系列并兼容DeepSeek、Qwen3等,共50+行業主流大模型版本的微調與服務,微調到應用的工期從幾天降低到小時級。

成熟訓推框架,高可用:構建開箱即用的訓推工具與框架,支持lora、full sft等多種訓練方式,定制模型按需托管,服務可用性99.95%。

算力利用率高,成本低:實現基于彈性混合云訓推算力的潮汐調度,支持即用即銷的大模型自主托管推理模式,持續提升算力資源利用率,實現大模型推理成本持續降低。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 科大訊飛
    +關注

    關注

    19

    文章

    857

    瀏覽量

    63637
  • 大模型
    +關注

    關注

    2

    文章

    3621

    瀏覽量

    5141
  • DeepSeek
    +關注

    關注

    2

    文章

    833

    瀏覽量

    3209

原文標題:高性能DeepSeek V3上線,更快、更穩定

文章出處:【微信號:訊飛開放平臺,微信公眾號:訊飛開放平臺】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    星辰Agent平臺入選36氪WISE 2025年度焦點產品

    近日,憑借在企業應用落地方面的卓越表現,星辰Agent平臺成功入選“36氪 WISE2025年度焦點產品”。
    的頭像 發表于 12-17 11:47 ?687次閱讀

    星辰MaaS平臺率先上線OpenAI最新開源模型

    8月6日凌晨,OpenAI 時隔六年再次回歸開源,發布兩款全新的大語言模型:gpt-oss-120b和gpt-oss-20b,性能與o4-mini 水平相當,并且可以在消費級硬件上運行。
    的頭像 發表于 08-13 16:43 ?1522次閱讀

    星火X1升級版正式上線

    今天,基于全國產算力訓練的深度推理大模型——星火X1升級版正式上線
    的頭像 發表于 07-30 14:12 ?2019次閱讀
    <b class='flag-5'>訊</b><b class='flag-5'>飛</b>星火X1升級版正式<b class='flag-5'>上線</b>

    【「DeepSeek 核心技術揭秘」閱讀體驗】第三章:探索 DeepSeek - V3 技術架構的奧秘

    問題,又像橫在發展路上的巨石,提醒我技術創新并非坦途,新架構在帶來優勢的同時,也會伴隨新挑戰。 五、小結 讀完第三章,DeepSeek - V3 的技術剖析讓我從架構、效率優化、精度平衡到模塊創新
    發表于 07-20 15:07

    【「DeepSeek 核心技術揭秘」閱讀體驗】書籍介紹+第一章讀后心得

    DeepSeek-V3于2024年12月26日正式上線,它是深度求索公司在DeepSeek LLM之后推出的又一力作。DeepSeek-V3是一個擁有6710億個參數的混合專家模型
    發表于 07-17 11:59

    星辰Agent開發平臺發布

    隨著以星火X1和DeepSeek-R1為代表的深度推理模型實現階躍式突破,模型自主規劃使用工具能力得到極大提升。在復雜任務拆解、多工具協同領域,AI Agent正展現出類人的認知決
    的頭像 發表于 05-06 09:34 ?1466次閱讀

    平臺介紹及基本使用(SC171開發套件V3

    平臺介紹及基本使用(SC171開發套件V3) 序列 課程名稱 視頻課程時長 視頻課程鏈接 課件鏈接 1 邊緣AIoT開發套件V3 *附件:邊緣AIoT開發套件V3(2026
    發表于 04-17 10:49

    大模型實戰(SC171開發套件V3

    大模型實戰(SC171開發套件V3) 序列 課程名稱 視頻課程時長 視頻課程鏈接 課件鏈接 工程源碼 1 火山引擎豆包大模型調試指南 3分31秒 https://t.elecfans.com/v
    發表于 04-16 18:52

    科大深度解析DeepSeek-V3/R1推理系統成本

    本篇分析來自科大技術團隊,深度解析了DeepSeek-V3 / R1 推理系統成本,旨在助力開發者實現高性價比的MoE集群部署方案。感謝
    的頭像 發表于 04-15 13:46 ?3964次閱讀
    科大<b class='flag-5'>訊</b><b class='flag-5'>飛</b>深度解析<b class='flag-5'>DeepSeek-V3</b>/R1推理系統成本

    DeepSeek全新API上線星辰MaaS平臺

    近日,DeepSeek最新推出DeepSeek-V3-0324版本,在以下方面實現明顯提升。
    的頭像 發表于 03-28 17:29 ?1248次閱讀

    科大攜手西安鐵路局打造人工智能平臺

    近日,科大攜手中國鐵路西安局集團有限公司(以下簡稱“西安鐵路局”)打造的人工智能平臺正式上線啟用。該人工智能平臺集成
    的頭像 發表于 03-17 16:14 ?1001次閱讀

    壁仞科技支持DeepSeek-V3滿血版訓練推理

    DeepSeek-V3滿血版在國產GPU平臺的高效全棧式訓練與推理,實現國產大模型與國產GPU的深度融合優化,開啟國產算力新篇章。
    的頭像 發表于 03-04 14:01 ?2171次閱讀

    星火智能體創作中心已全面接入DeepSeek-R1/V3模型

    大模型浪潮邁入第三年,如何讓AIGC切實落地為生產力,智能體成了AI玩家們的共同選擇。2023年6月,星火就已上線了智能體平臺,覆蓋職場、學習、編程等剛需場景,打造每個人開箱即用的
    的頭像 發表于 03-03 14:34 ?2003次閱讀

    星火原生應用接入DeepSeek

    DeepSeek全系模型已正式上線開放平臺,支持一鍵獨享部署,首發精調服務,為開發者打造API高效穩定服務。
    的頭像 發表于 02-25 14:14 ?1613次閱讀

    商湯大裝置DeepSeek企業版上線

    今年2月,商湯大裝置萬象平臺正式上線DeepSeek-R1、DeepSeek-V3等模型,并為免費版提供3個月內千萬Token額度,受到客
    的頭像 發表于 02-25 10:07 ?890次閱讀