“全國大學生嵌入式芯片與系統設計競賽”是我國電子信息類頂級的大學生學科競賽之一，具有規格高、難度大、強應用、重創新的特點，為全國各大高校相關專業學子提供了一個展示才華、切磋技藝、追逐夢想的國家級高端平臺，也是推進高校與企業協同育人合作的良好契機。

飛凌嵌入式作為本屆大賽協辦單位之一，聯合瑞芯微在應用賽道中設立專項賽題，并采用基于瑞芯微RK3588芯片設計的ELF 2開發板作為參賽平臺，雙方希望通過這一合作，進一步深化產教融合，助力嵌入式系統領域創新人才的培養。

在2025年嵌入式大賽上，東南大學206團隊憑借參賽項目“基于RK3588的智能座艙多模交互系統與大模型語義理解優化”，榮獲全國一等獎。該團隊由自動化學院的王心果、方湘、陳逸煌三位同學組成，并得到李奇教授的悉心指導。下面，讓我們一起了解一下這個獲獎項目的具體內容。

“基于RK3588的智能座艙多模交互系統與大模型語義理解優化”項目介紹

隨著車載座艙系統功能日益復雜，傳統操作方式普遍存在交互繁瑣、過度依賴視覺、語義理解能力有限等問題，難以滿足現代智能駕駛場景對安全性與便捷性的雙重需求。為此，參賽項目基于瑞芯微RK3588設計的ELF 2開發板，設計并實現了一款多模態車載人機交互系統，旨在提升車載環境下的人機交互自然性與操作效率，改善用戶體驗，具體工作如下：

首先，針對實際車載需求，此參賽項目設計并集成了近十項功能模塊。在輔助駕駛方面，本項目設計了疲勞駕駛監測、倒車助手、哨兵監控和行車導航等常用功能模塊，全面覆蓋行車與駐車過程中的多種應用需求；在休閑娛樂方面，本項目設計了音樂播放器和桌面寵物兩個模塊，此外，還集成了面部解鎖，手機投屏，天氣播報等功能，在確保行車安全的前提下提升用戶的使用體驗。用戶可通過語音指令、觸覺交互等多種方式與系統進行交互，交互方式靈活自然，能夠有效降低駕駛過程中對視覺操作的依賴，提升行車安全。

同時，針對傳統車載座艙自然語義理解難題，此參賽項目在車載語音交互環節引入了語言大模型（LLM）技術。相比傳統語音助手，本項目通過構建高性能語音中樞，實現了對口語化表達的精準理解，能夠靈活應對多樣化指令，顯著改善語音交互體驗，有效降低駕駛員認知負擔。

最后，此項目采用了模塊化架構設計。各功能模塊獨立部署，便于按需裁剪與升級，滿足不同車型、不同用戶需求。借助RK3588平臺強大的AI算力與多媒體處理能力，系統能夠在實現復雜功能的同時保持快速響應，保障用戶操作的實時性與流暢性。實際測試表明，系統各模塊穩定可靠，語音識別準確率高，響應延遲低，具備較強的實用價值。

*免責聲明：本文所有作品介紹均來自2025第八屆全國大學生嵌入式芯片與系統設計競賽應用賽道學生提交的參賽作品展示，由學生自行制作。飛凌嵌入式展示獲獎作品內容僅為展示參賽者作品，為開發者帶來更多創意啟發，并已征得主辦方及參賽團隊同意。飛凌嵌入式不承擔作品展示內容或視頻字體的相關法律責任。