伦伦影院久久影视,天天操天天干天天射,ririsao久久精品一区 ,一本大道香蕉大久在红桃,999久久久免费精品国产色夜,色悠悠久久综合88,亚洲国产精品久久无套麻豆,亚洲香蕉毛片久久网站,一本一道久久综合狠狠老

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

瑞薩RZ/V2H平臺支持部署離線版DeepSeek -R1大語言模型

RA生態工作室 ? 2025-05-13 17:07 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

1 DeepSeek在端側設備的應用場景

DeepSeek大語言模型(LLM)可用于理解人類語言的交互方式,思考,并給出合適的回應。同時,通過結合RAG(Retrieval-Augmented Generation,檢索增強生成)技術,可以從用戶定制知識數據庫檢索信息,將其作為提示輸入給LLM,LLM通過將這些額外的知識與自己的語言技能相結合,可以撰寫更準確、更具時效性且更貼合具體需求的文字,提供面向某個具體領域的專業應答。在AI概念和端側AI技術火熱的當下,瑞薩半導體推出的面向端側AI應用的高性能MPU,也可以部署DeepSeek-R1模型。在我們預想的應用場景中,我們可以在部署了DeepSeek-R1模型和RAG定制數據庫的瑞薩MPU電路板上,在不聯網的情況下,實現如下應用:

  • 向AI模型投喂高端家電、車輛等復雜電子產品的用戶手冊,對這些模型進行訓練,以創建一個AI助手,能夠自動執行某些復雜功能的設置。如此,用戶就不必為了使用某一樣新奇的功能而花費大量時間閱讀手冊。相對于傳統的語音識別應用需要特定的命令或者喚醒詞,引入LLM對口頭語言的表達進行分析,可以讓硬件設備更容易理解用戶的需求。
  • 面向騎行愛好者,讓AI助手在自行車電腦中運行,這樣用戶在騎自行車時就可以獲得個性化的導覽/導航以及其他信息。
  • AI智能眼鏡&耳機,直接理解用戶口語表達的命令,以日常使用的人類語言與電子系統進行交互。
  • 實時的翻譯機,在不聯網的應用場景中,利用AI做一些簡單的語言轉換,甚至可以作為人與寵物之間的交互。例如,寵物貓和寵物狗的語言表達相對于人類語言更簡單,可以把它們的語言轉換成人類理解和思考的方式表現出來。

為此,我們在瑞薩定位于AI應用的MPU芯片RZ/V2H,適配了DeepSeek-R1:1.5B的LLM模型,以支撐這些潛在的AI應用。


2 瑞薩RZ/V2H硬件平臺簡介

在演示用例中,使用瑞薩官方的RZ/V2H-EVK開發板,如圖1所示。

wKgZPGgljcOAPsAvABG9Rac0E2k815.png

圖1 瑞薩官方RZ/V2H-EVK開發板

板載豐富的外擴資源,如圖2所示。

wKgZO2gljcSAfHs4AASb-PgbqS8278.png

圖2 RZ/V2H-EVK開發板板載資源

關于RZ/V2H-EVK開發板的更多詳情,可訪問瑞薩官網產品主頁:(您可復制下方鏈接至瀏覽器查看)

RZ/V2H-EVK - RZ/V2H四核視覺AI MPU評測套件 | Renesas瑞薩電子

https://www.renesas.cn/zh/products/microcontrollers-microprocessors/rz-mpus/rzv2h-evk-rzv2h-quad-core-vision-ai-mpu-evaluation-kit


其中,RZ/V2H集成了7個處理器核心,分別是4個Cortex-A55@1.8GHz,2個Cortex-R8@800MHz,1個Cortex-M33@200MHz,同時還集成了瑞薩自主研發的AI計算專用加速引擎DRP-AI3和圖像計算加速引擎DRP,有系統框圖,如圖3所示。

wKgZO2gljcSALe1XAARliH4CHI0315.png

圖3 RZ/V2H處理器系統框圖


3 下載、配置和啟動DeepSeek-R1

RZ/V2H-EVK開發板已經適配了Yocto Linux操作系統,在此基礎上,使用Ollama官方推薦的方式,可以完成部署并運行DeepSeek-R1大模型。

使用可以聯通外部網絡的路由器,用網線將RZ/V2H-EVK電路板和PC連起來,確保RZ/V2H-EVK電路板和電腦可以聯網,并可互相訪問。對RZ-V2H-EVK電路板的配置工作,將通過電腦完成。

在電腦上,通過Tera Term工具(或者其它SSH工具)連接到開發板。在終端中,使用腳本安裝并啟動Ollama服務:

wKgZPGgljcSAUWBKAAAnotr2rTQ828.png

通過Ollama啟動DeepSeek-R1模型。注意,在第一次運行命令時,會自行下載DeepSeek-R1模型文件。在此過程中,需要確保聯網情況良好。

wKgZPGgljcSAFC1KAAAXgSFBj5Q244.png

下載完成之后,自行啟動DeepSeek-R1模型。后續運行這個命令載入模型時,就不需要聯網了。

載入模型成功后,可以看到命令行中有提示信息“Send a message(/? for help)”。此時,可以向運行在RZ/V2H-EVK電路板上的離線版DeepSeek提問了。

wKgZO2gljcWAaKZNAAMVE-seECQ697.png

圖4 在RZ/V2H上啟動DeepSeek-R1

4 運行演示

在啟動DeepSeek-R1后,我們問了第一個問題"介紹一下你自己",接下來,請看RZ/V2H-EVK電路板的反應:

https://mp.weixin.qq.com/s/y61pMJCA1Vw5t7YK4OO5Jw

從視頻中可以看到,DeepSeek-R1大模型已經成功運行在RZ/V2H-EVK電路板上。

接下來,讓我們期待更多基于瑞薩產品和DeepSeek開發出的有趣應用吧。

免費樣品申請

https://jsj.top/f/AgUyYV

瑞薩技術論壇

https://community-ja.renesas.com/zh/forums-groups/mcu-mpu/

瑞薩中文社區

https://www.ramcu.cn/


聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 瑞薩電子
    +關注

    關注

    39

    文章

    2982

    瀏覽量

    74455
  • 語言模型
    +關注

    關注

    0

    文章

    572

    瀏覽量

    11335
  • DeepSeek
    +關注

    關注

    2

    文章

    837

    瀏覽量

    3336
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    電子RZ/T和RZ/N系列微處理器全面支持PROFINET

    面向RZ/T和RZ/N系列工業網絡系統微處理器(MPU),電子于2025年三月推出經認證的PROFINET IRT和PROFIdrive軟件協議棧,并實現全面
    的頭像 發表于 01-27 09:44 ?484次閱讀
    <b class='flag-5'>瑞</b><b class='flag-5'>薩</b>電子<b class='flag-5'>RZ</b>/T和<b class='flag-5'>RZ</b>/N系列微處理器全面<b class='flag-5'>支持</b>PROFINET

    RZ/T2H平臺多核異構的應用場景分析

    本文以RZ/T2H多軸控制/驅動的實例,介紹RZ/T2H平臺的多核異構應用場景。
    的頭像 發表于 12-15 11:34 ?2601次閱讀
    <b class='flag-5'>瑞</b><b class='flag-5'>薩</b><b class='flag-5'>RZ</b>/T<b class='flag-5'>2H</b><b class='flag-5'>平臺</b>多核異構的應用場景分析

    如何在NVIDIA Blackwell GPU上優化DeepSeek R1吞吐量

    開源 DeepSeek R1 模型的創新架構包含多頭潛在注意力機制 (MLA) 和大型稀疏混合專家模型 (MoE),其顯著提升了大語言
    的頭像 發表于 08-12 15:19 ?4363次閱讀
    如何在NVIDIA Blackwell GPU上優化<b class='flag-5'>DeepSeek</b> <b class='flag-5'>R1</b>吞吐量

    拆解百元級工業核心板:明遠智睿V2H如何實現“算力自由”?

    當“工業級”與“百元級”兩個詞同時出現,多數人的第一反應是質疑:低成本是否意味著性能妥協?明遠智睿與電子聯合推出的 V2H工業核心模組 ,用 8Tops算力、全接口設計、完整生態支持
    的頭像 發表于 07-29 14:42 ?1017次閱讀

    速看!EASY-EAI教你離線部署Deepseek R1模型

    和自然語言推理等復雜任務。作為國產AI大數據模型的代表,憑借其卓越的推理能力和高效的文本生成技術,在全球人工智能領域引發廣泛關注。本文主要說明DeepSeek-R1
    的頭像 發表于 07-25 15:22 ?1466次閱讀
    速看!EASY-EAI教你<b class='flag-5'>離線</b><b class='flag-5'>部署</b><b class='flag-5'>Deepseek</b> <b class='flag-5'>R1</b>大<b class='flag-5'>模型</b>

    【VisionFive 2單板計算機試用體驗】3、開源大語言模型部署

    1、ollama平臺搭建 ollama可以快速地部署開源大模型,網址為https://ollama.com, 試用該平臺,可以在多
    發表于 07-19 15:45

    Arm Neoverse N2平臺實現DeepSeek-R1滿血版部署

    頗具優勢。Arm 攜手合作伙伴,在 Arm Neoverse N2 平臺上使用開源推理框架 llama.cpp 實現 DeepSeek-R1 滿血版的部署,目前已可提供線上服務。
    的頭像 發表于 07-03 14:37 ?1322次閱讀
    Arm Neoverse N<b class='flag-5'>2</b><b class='flag-5'>平臺</b>實現<b class='flag-5'>DeepSeek-R1</b>滿血版<b class='flag-5'>部署</b>

    RZ T2H更換DDR流程和工具介紹

    RZ T2H是由2R52核和4個A55核構成。支持
    的頭像 發表于 06-27 14:54 ?2603次閱讀
    <b class='flag-5'>瑞</b><b class='flag-5'>薩</b><b class='flag-5'>RZ</b> T<b class='flag-5'>2H</b>更換DDR流程和工具介紹

    DeepSeek開源新版R1 媲美OpenAI o3

    ;還有一些網友的實測評價都顯示,?DeepSeek新版R1 的性能可以媲美OpenAI最新的o3模型高版本。妥妥的超高性價比的平替。 此外,關于DeepSeek
    的頭像 發表于 05-29 11:23 ?1298次閱讀

    使用MPU芯片RZ/V2H部署DeepSeek-R1模型

    DeepSeek語言模型(LLM)可用于理解人類語言的交互方式,思考,并給出合適的回應。
    的頭像 發表于 05-15 14:40 ?1078次閱讀
    使用<b class='flag-5'>瑞</b><b class='flag-5'>薩</b>MPU芯片<b class='flag-5'>RZ</b>/<b class='flag-5'>V2H</b><b class='flag-5'>部署</b><b class='flag-5'>DeepSeek-R1</b><b class='flag-5'>模型</b>

    DeepSeek R1模型本地部署與產品接入實操

    針對VS680/SL1680系列大算力芯片,我們的研發團隊正在研究將蒸餾后的輕量級DeepSeek模型DeepSeek-R1-Distill-Qwen-1.5B)部署到SOC本地,以
    的頭像 發表于 04-19 16:32 ?813次閱讀
    <b class='flag-5'>DeepSeek</b> <b class='flag-5'>R1</b><b class='flag-5'>模型</b>本地<b class='flag-5'>部署</b>與產品接入實操

    SL1680 SoC本地運行DeepSeek R1 1.5B大模型

    深蕾半導體SL1680 SoC本地成功運行DeepSeek R1 Distill Qwen2.5 1.5B大模型,展示了執行過程及本地小參數大模型與云端大
    的頭像 發表于 04-17 17:09 ?997次閱讀
    SL1680 SoC本地運行<b class='flag-5'>DeepSeek</b> <b class='flag-5'>R1</b> 1.5B大<b class='flag-5'>模型</b>

    科大訊飛深度解析DeepSeek-V3/R1推理系統成本

    本篇分析來自科大訊飛技術團隊,深度解析了DeepSeek-V3 / R1 推理系統成本,旨在助力開發者實現高性價比的MoE集群部署方案。感謝訊飛研究院副院長&AI工程院常務副院長龍明康、AI工程院AI云
    的頭像 發表于 04-15 13:46 ?4253次閱讀
    科大訊飛深度解析<b class='flag-5'>DeepSeek-V</b>3/<b class='flag-5'>R1</b>推理系統成本

    ORinNano離線部署Deepseek R1模型教程

    ORinNano離線部署Deepseek R1模型教程
    的頭像 發表于 04-10 15:32 ?1467次閱讀
    ORinNano<b class='flag-5'>離線</b><b class='flag-5'>部署</b><b class='flag-5'>Deepseek</b> <b class='flag-5'>R1</b>大<b class='flag-5'>模型</b>教程

    香橙派發布OrangePi RV2本地部署Deepseek-R1蒸餾模型指南

    繼香橙派昇騰系列產品、OrangePi5系列產品完成與DeepSeek模型的深度適配之后,香橙派日前官方發布OrangePiRV2運行Deepseek-R1蒸餾
    的頭像 發表于 03-28 11:55 ?1740次閱讀
    香橙派發布OrangePi RV<b class='flag-5'>2</b>本地<b class='flag-5'>部署</b><b class='flag-5'>Deepseek-R1</b>蒸餾<b class='flag-5'>模型</b>指南