撰寫文章、編寫代碼、譜寫 Rap,上知天文,下知地理,十八般武藝樣樣精通……從 2022 年底開始,一款由美國(guó)人工智能研究實(shí)驗(yàn)室 OpenAI 發(fā)布的自然語(yǔ)言處理工具 ChatGPT 備受關(guān)注,成為現(xiàn)象級(jí)的 AI 產(chǎn)品,掀起全球的 AI 浪潮。
在以 ChatGPT 為代表的 AI 應(yīng)用蓬勃發(fā)展的背后,離不開數(shù)據(jù)中心提供的算力支撐。而隨著相關(guān)應(yīng)用的不斷發(fā)展,它們所需的算力將呈指數(shù)級(jí)增長(zhǎng),所需的能耗也不容小覷。根據(jù) 2021 年國(guó)外研究人員年發(fā)表的研究結(jié)果,部分基于 GPT-3 模型的訓(xùn)練共消耗1,287 兆瓦時(shí)電力,并產(chǎn)生了超過(guò)550 噸二氧化碳當(dāng)量的排放,這相當(dāng)于一個(gè)人往返紐約和舊金山550 次所消耗的二氧化碳量[1]。
Ampere Computing 一直致力于為數(shù)據(jù)中心帶來(lái)高性能、高能效的云原生處理器,助力減少環(huán)境足跡,構(gòu)建綠色數(shù)據(jù)中心,降低總體擁有成本(TCO),以更可持續(xù)的方式為用戶提供更多的綠色算力。在 AI 領(lǐng)域,Ampere 提供的 AI 解決方案具備卓越的推理性能和優(yōu)越的能效,幫助用戶輕松應(yīng)對(duì)算力及能耗的挑戰(zhàn)。
想知道 ChatGPT 如何看待AI 在“減碳”方面的作用嗎?快來(lái)參與文末的趣味互動(dòng)吧!
云原生設(shè)計(jì),強(qiáng)力賦能 AI 推理
Ampere Altra Max 基于高性能、高能效及可預(yù)測(cè)的創(chuàng)新架構(gòu),非常適合在云中執(zhí)行 AI 推理工作,不僅可以滿足延遲和吞吐量的要求,而且性能優(yōu)于基于 x86 架構(gòu)的 CPU。讓我們一起來(lái)看一下在 Ampere Altra Max 處理器上運(yùn)行 AI 推理的收益吧!
開箱即用,暢享便捷體驗(yàn)
在 Ampere Altra Max 上運(yùn)行 AI 推理不需要修改或轉(zhuǎn)換已有神經(jīng)網(wǎng)絡(luò),即可在 TensorFlow、PyTorch 或 ONNX 框架上開發(fā)和運(yùn)行 AI 推理的工作負(fù)載。用戶可從 Ampere 或 Ampere 云服務(wù)合作伙伴處免費(fèi)獲得優(yōu)化框架,高效地部署和運(yùn)行應(yīng)用程序。同時(shí),Ampere Altra Max 是目前唯一支持 fp16 數(shù)據(jù)格式,并已廣泛可用的云原生處理器,將 fp32 訓(xùn)練的網(wǎng)絡(luò)量化為 fp16 極為簡(jiǎn)單,且不會(huì)導(dǎo)致明顯的精度損失。
此外,Ampere 還提供一系列不斷優(yōu)化、預(yù)訓(xùn)練的模型,供用戶下載用于演示或在實(shí)際應(yīng)用程序中進(jìn)行調(diào)整并使用。并且,Ampere Altra Max CPU 還可與 NVIDIA GPU 協(xié)同工作,滿足用戶的訓(xùn)練需求。
高度可擴(kuò)展,有效抵抗干擾
憑借創(chuàng)新的可橫向擴(kuò)展架構(gòu),Ampere Altra Max 處理器具有更高的核心數(shù)和出色的單線程性能。結(jié)合所有內(nèi)核可同時(shí)一致頻率運(yùn)行的特性,Ampere Altra Max 的單 CPU 整體性能比目前最好的 x86 服務(wù)器更高、更穩(wěn)定,在多租戶的云環(huán)境中對(duì)“嘈雜鄰居”的干擾也更具抵抗力。
基準(zhǔn)測(cè)試,彰顯卓越推理性能
為展示 Ampere Altra Max CPU 在多個(gè)具有代表性的 AI 推理任務(wù)中的卓越性能,Ampere 按照 MLCommons 指南運(yùn)行了一系列基準(zhǔn)測(cè)試(包括計(jì)算機(jī)視覺(jué)和 NLP 應(yīng)用),部分測(cè)試的結(jié)果如下。
計(jì)算機(jī)視覺(jué)方面,使用 SSD ResNet-34 測(cè)試典型的對(duì)象檢測(cè)應(yīng)用,在 fp32 模式下與比較對(duì)象相比,Ampere Altra Max 在低延遲方面最高可領(lǐng)先近 4 倍。在 fp16 模式下,Altra Max 將領(lǐng)先優(yōu)勢(shì)擴(kuò)大了兩倍,同時(shí)保持了相同的精度。

在性能功耗比方面,Ampere Altra Max 也具有顯著優(yōu)勢(shì)。在 fp16 分辨率下,Ampere Altra Max 的能效與比較對(duì)象相比高約 5 倍。而在 fp32 分辨率下,Ampere Altra Max 則擁有高約 2 倍的領(lǐng)先優(yōu)勢(shì)。

面對(duì)蓬勃發(fā)展的 AI 應(yīng)用,Ampere AI 解決方案將為 AI 應(yīng)用和數(shù)據(jù)中心的發(fā)展提供更可持續(xù)的綠色算力支撐,助力解決不斷升級(jí)的算力需求和日益突出的環(huán)境問(wèn)題。一直以來(lái),Ampere 著眼未來(lái)、不斷創(chuàng)新,將卓越性能和能效融入到為云定制的解決方案中,助力釋放數(shù)字經(jīng)濟(jì)生產(chǎn)力,助推科技產(chǎn)業(yè)在可持續(xù)發(fā)展的道路上一路“狂飆”。
審核編輯:湯梓紅
-
AI
+關(guān)注
關(guān)注
91文章
39793瀏覽量
301427 -
人工智能
+關(guān)注
關(guān)注
1817文章
50098瀏覽量
265393 -
云原生
+關(guān)注
關(guān)注
0文章
265瀏覽量
8574 -
算力
+關(guān)注
關(guān)注
2文章
1532瀏覽量
16744 -
ChatGPT
+關(guān)注
關(guān)注
31文章
1598瀏覽量
10269
原文標(biāo)題:創(chuàng)芯課堂|當(dāng) AI 遇上云原生,綠色算力助力開啟 AI 新時(shí)代
文章出處:【微信號(hào):AmpereComputing,微信公眾號(hào):安晟培半導(dǎo)體】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
“上天入海”之算力革命:“海風(fēng)直連”海底數(shù)據(jù)中心開啟綠色算力新紀(jì)元
當(dāng)頂流Clawdbot遇上AIMO,個(gè)人AI Agent迎來(lái)“實(shí)體化”革命!
將AI算力送上太空,是終極方案還是瘋狂幻想?評(píng)論區(qū)說(shuō)出你的陣營(yíng)!
AI賦能6G與衛(wèi)星通信:開啟智能天網(wǎng)新時(shí)代
什么是AI算力模組?
什么是AI算力模組?
睿海光電:以敏捷交付與全域兼容領(lǐng)跑AI光模塊賽道,賦能智算新時(shí)代
睿海光電領(lǐng)航AI光模塊:超快交付與全場(chǎng)景兼容賦能智算時(shí)代——以創(chuàng)新實(shí)力助力全球客戶構(gòu)建高效算力底座
睿海光電以高效交付與廣泛兼容助力AI數(shù)據(jù)中心800G光模塊升級(jí)
AI 邊緣計(jì)算網(wǎng)關(guān):開啟智能新時(shí)代的鑰匙?—龍興物聯(lián)
一文看懂AI算力集群
AI與云端生產(chǎn)力結(jié)合應(yīng)用場(chǎng)景及技術(shù)解析(2025)
當(dāng)AI遇上云原生,綠色算力助力開啟AI新時(shí)代
評(píng)論