一、ASTRA AI是什么

ASTRA AI芯片是一種集成了多種計算單元（包括NPU/uNPU、GPU、CPU、DSP等）的異構計算系統級芯片（SOC），專為處理復雜的人工智能（AI）任務而設計。這種設計使得ASTRA AI芯片能夠在單個芯片上高效地執行多種不同類型的計算任務，從而滿足各種AI應用場景的需求。

二、主要組成部分解析

1.NPU/uNPU（Neural Processing Unit/micro Neural Processing Unit）

NPU是專門用于神經網絡加速的處理器，能夠高效執行深度學習算法中的矩陣運算和卷積操作。

uNPU指的是微型的NPU，設計用于處理較小規模的神經網絡或嵌入式系統中的AI任務，以節省功耗和成本。

2.GPU（Graphics Processing Unit）：

GPU原本用于圖形渲染，但因其強大的并行處理能力，現在也被廣泛用于AI計算，特別是加速大規模矩陣運算和圖像處理。

3.CPU（Central Processing Unit）：

CPU是系統的主控中心，負責執行各種指令，包括操作系統、應用程序以及AI任務的調度和管理。

4.DSP（Digital Signal Processor）：

DSP專門設計用于處理數字信號，如音頻和視頻數據。在AI應用中，DSP可以加速信號處理和特征提取等任務。

三、多模態AI算法支持

ASTRA AI芯片支持多模態AI算法，意味著它能夠同時處理來自不同來源和類型的數據，如圖像、語音、文本等。這種多模態處理能力對于構建復雜、全面的AI系統至關重要，因為它可以整合來自多個傳感器的信息，從而做出更準確的決策。

1.視覺算法：用于圖像識別、物體檢測、場景理解等任務。

2.語音算法：支持語音識別、語音合成、情感分析等語音處理任務。

3.大模型支持：能夠接入并高效運行各種大型AI模型，如深度學習模型、自然語言處理模型等，從而滿足復雜應用場景的需求。

四、本地AI算力平臺五大特點

為了滿足構建新一代智能物聯網設備的客戶需求，深蕾半導體推出了可擴展的智能邊緣處理器產品組合Astra系列。全新的Astra本地AI算力平臺產品具備五大特點助力客戶構建新一代智能物聯網產品：

差異化計算解決方案

提供一系列節能多模的AI MPU芯片，以及高性能AI及MCU，為家庭自動化、智能家電、過程控制、可穿戴設備、安全、數字標牌、流媒體和企業會議等市場應用提供可擴展的、差異化的計算解決方案。

自適應AI框架

通過開放、跨平臺、工具化、建模和優化的自適應AI框架，從 “讓人工智能發揮作用” 變為 “與人工智能合作”。

統一的軟件體驗

全面的板級支持包（支持Linux，Android和領先的RTOS）提供開放、一致的跨平臺體驗。它基于標準的操作系統接口、安全架構和加速方法構建。用戶可以基于熟悉的開發環境縮短評估和決策周期

廣泛的合作伙伴解決方案生態系統

客戶可以與行業領先的合作伙伴公司（從ODM和ISV到服務提供商和系統集成商）一起構建市場就緒的系統和解決方案堆棧。從用于企業和消費市場的單板計算機、流媒體、平板電腦、顯示器和用于教育和商業的交互式 A/V 會議系統，到支持計算的連接模塊，ASTRA產品系列使各種物聯網平臺成為可能。

優秀的無線連接性能

業界一流、行業認可的無線連接性能，支持Wi-Fi、藍牙、BLE、802.15.4和GPS/GNSS等，并通過標準的 Linux 和 RTOS 軟件框架和協議（如 Matter）實現。

五、支持多種方式接入AI推理

1.HDMI RX：通過HDMI接收接口，ASTRA可以接入高清視頻信號，進行視頻內容的實時分析和處理。這種方式適用于需要處理高清視頻輸入的場景，如安防監控、視頻會議等。

2.MIPI/USB攝像頭：MIPI和USB是兩種常見的攝像頭接口標準。ASTRA支持通過這兩種接口接入攝像頭，獲取實時視頻流，并應用AI算法進行圖像識別、目標跟蹤等任務。這種方式在自動售賣機、智慧零售等領域有廣泛應用。

3.RTSP/RTMP流：RTSP（Real Time Streaming Protocol）和RTMP（Real Time Messaging Protocol）是兩種常用的流媒體傳輸協議。ASTRA支持通過這兩種協議接入網絡視頻流，進行遠程視頻內容的分析和處理。這種方式適用于需要處理網絡視頻內容的場景，如遠程監控、在線教育等。

4.本地視頻播放：ASTRA支持對存儲在本地設備上的視頻文件進行播放和分析。這種方式適用于需要處理本地視頻文件的場景，如視頻編輯、視頻內容審核等。

5.靜態圖像：ASTRA還支持對靜態圖像進行分析和處理。這可以用于圖像識別、圖像分類、圖像增強等多種應用場景。

6.麥克風：通過麥克風接入，ASTRA可以接收音頻信號，進行語音識別、語音合成等任務。這在智慧客服、智能家居等領域有重要應用。

六、芯片系列以及典型應用場景

ASTRA AI芯片系列中，包含了SL1680型號、SL1640型號、SL1620型號、SR110型號。應用場景有：

1.自動售賣：通過接入攝像頭和麥克風，ASTRA可以實時分析顧客的行為和需求，優化商品陳列和售賣策略。

2.智慧顯示牌：結合視頻流和靜態圖像的處理能力，ASTRA可以根據環境變化和觀眾需求動態調整顯示內容，提升用戶體驗。

3.安檢設備：通過對行李、人員等物品進行圖像識別和分析，ASTRA可以幫助安檢人員快速發現潛在威脅，提高安檢效率。

4.缺陷檢測：在工業生產線上，ASTRA可以對產品進行實時圖像檢測，發現缺陷并及時報警，確保產品質量。

5.事件預警：結合視頻流和音頻信號的分析能力，ASTRA可以實時監測環境中的異常情況，并及時發出預警信號。

6.自動化運維：ASTRA可以通過對系統日志、監控視頻等數據的分析，幫助運維人員快速定位和解決問題，提高運維效率。

7.多媒體交互：通過語音識別和合成技術，ASTRA可以實現與用戶的自然語言交互，提供更加便捷和智能的服務體驗。

8.視頻內容分析：ASTRA可以對視頻內容進行深度分析，提取關鍵信息并生成分析報告，為決策提供有力支持。

綜上所述，

ASTRA憑借其強大的AI推理能力和多樣化的接入方式，

在多個領域都有著廣泛的應用前景。

審核編輯 黃宇