智能時代的一大特點，是過去需要憑人的意識和指揮產生的動作，在必要時可以由機器完成，并因此誕生規模可觀的創新應用。智能視覺，就是新時代創新應用的一大典型。

例如在家庭住宅領域，除了基礎安防功能的升級，智能攝像頭“看護”功能正在逐步提升，對老人、嬰兒、寵物等群體的必要監測和異常情況告警成為用戶新的需求；又例如在商超零售領域，通過攝像頭和視覺分析技術可以進行人流統計和行為分析，進而優化商店布局或推廣策略；在城市管理領域，中國將視覺技術應用于城市安全監控和智能交通管理的水平已經處于世界前列；另外在工業制造領域，智能視覺在自動化導航和定位、產品質檢等方面的應用正逐步鋪開……

而在這些需求背后，對智能視覺技術及其系統提出的要求包括：

1）云、邊、端能力的協同，方便快速、高效、低延時處理海量視頻數據；

2）AI技術的賦能加持，用以提高圖像的分析和識別能力；

3）提升算力水平，用以應對高精度、高并發的大規模圖像數據；

4）隱私和安全防護能力，用以抵御惡意攻擊和信息盜用。

站在Arm的角度，作為全球領先的半導體IP供應商，目前在智能攝像頭市場擁有9成以上的市場份額，同樣接收著來自不同客戶新的需求反饋，包括對邊緣計算、產品設計差異化等方面。

基于此，近日Arm正式宣布推出針對視覺應用設備的Arm智能視覺參考設計。

全新參考設計選用Arm廣泛應用于智能視覺領域的處理器和系統IP，并首次將Arm現有子系統IP與安謀科技IP整合，一改過去僅提供生產原材料（即處理器和系統IP）的方式，進一步向行業客戶提供預先經過集成和驗證的子系統，最終促成縮短研發周期，使開發者專注于產品的差異化。

Arm 物聯網事業部業務拓展副總裁馬健表示：“中國視覺市場在世界上擁有領先地位及較高的創新活躍度，Arm智能視覺參考設計將服務于中國市場。”

關于Arm智能視覺參考設計的核心內容

本次Arm智能視覺參考設計包括CPU、ISP、NPU和VPU處理器選項以及將這些元件粘合在一起的子系統IP，具體內容包括：

Arm Corstone-1000：首先，Corstone是一套預先經過集成并驗證的子系統，是Arm物聯網解決方案的根基，旨在加速芯片產品流片和量產，使設計者可以專注于增強自己的差異化。而Corstone-1000是首款為Cortex-A設計的子系統，該方案基本配置是經過量產考驗的Cortex-A35或Cortex-A53，并取得了Arm SystemReady IR 認證，確保Linux等操作系統的開機即用，并簡化軟件開發。

Arm Corstone-300：作為低功耗待機子系統，旨在降低邊緣設備的功耗，提高系統效率。

Arm Mali-C55 圖像信號處理器 (ISP)：是Arm至今為止面積最小、功耗最低、且可配置最高的ISP產品，負責提供升級的圖像質量功能，且擁有全方面的軟件工具支持。

來自安謀科技的第三方IP，包括“玲瓏”VPU和“周易”NPU。“玲瓏”VPU支持緊湊的、多格式且高效能的視頻編解碼處理，提供靈活的組合和選擇；“周易”NPU同樣靈活可配置，根據需求可配置出1-30 TOPS 的處理性能，且可以支持多種典型的深度學習框架，如Tensorflow、Caffe、Pytorch等，加速客戶應用的部署。

基于Arm視覺參考設計，開發者不再需要從0開始工作，而是可以專注產品的差異化，使用工具快速將想法轉化為產品推向市場，顯著降低芯片開發的成本和風險，并縮短研發周期。另外，該參考設計具備可信任的底層IP技術，在增強安全、可移植性與兼容性方面，已取得 Arm SystemReady IR 與 PSA Certified Level 2 等重要的業界標準認證。

目前，智能視覺參考設計的目標受眾，包括了邊緣AI領域的初創公司、跨界創新公司或是希望進行垂直整合的系統公司等。

Arm正式推出智能視覺合作伙伴計劃

在本次發布中，“Arm智能視覺合作伙伴計劃”得到正式公開。Arm將攜手AI視覺、芯片設計、軟件、算法、系統集成等伙伴共同打造基于Arm架構智能視覺應用的強大生態，以進一步加速視覺硬件、軟件和系統的開發。

目前，已有十多家來自智能物聯網不同領域的國內領先企業加入該計劃。

其中百度飛槳已經實現了基于飛槳的視覺模型庫和 Arm 虛擬硬件的整合適配；誠邁科技作為軟件設計合作伙伴加盟，更在日前成為中國第一個Arm批準的ISP調優伙伴；另外廈門星宸科技在月初通過了PSA安全認證，展示了智能視覺界領軍者對安全和隱私保護重視程度的提高。

總的來說，因為大多數公司并不擁有涵蓋所有芯片架構前端、后端設計的龐大團隊，他們的研發工作需要借力芯片設計公司。那么通過這項生態計劃，Arm希望推動生態伙伴們熟悉Arm的參考設計，并在參考設計的基礎上快速流片，最終幫助他們的客戶推出滿意的芯片。在這個過程中，Arm的關鍵作用是形成預先集成、預先驗證的標準化子系統，生態伙伴在它的基礎上設計出更多創新的應用。

Arm物聯網全面解決方案，擴充進行時

2021年，Arm首次發布物聯網全面解決方案，核心主要由三部分構成：

面向硬件設計的Arm Corstone：在前文中已有敘述，是一套預先集成且經過驗證的子系統，專為特定用例而設計。對于芯片伙伴而言，Arm Corstone極大地加快了芯片流片和量產進程。

賦能軟件開發的Arm虛擬硬件設計庫：Arm虛擬硬件創建了Corstone芯片參考設計的虛擬拷貝，并通過云服務的方式普及給開發者們。它支持基于云的現代開發，無需設置和維護硬件集群，Arm 虛擬硬件可以輕松擴展到數千個設備，并且由于Arm虛擬硬件與底層IP和Corstone設計同時可用，開發者和OEM廠商可以遠在芯片可用前就開始工作，這將大幅節省設計時間和成本。

可實現更簡單的軟件復用的Project Centauri生態系統計劃：Project Centauri擴展了物聯網軟件的創新，通過已定義的標準、安全框架以及RTOS復雜度的抽象化，重點實現軟件重復使用，支持開發者在更多設備上分攤投入，降低成本。

在擁有不斷增多的用戶案例的基礎上，為了滿足日益變化的物聯網客戶需求，Arm持續對以上物聯網全面解決方案進行擴充，逐步在安全、云原生、邊緣計算、語音識別，以及包括本次的智能視覺方面開發新的產品或功能。未來，Arm物聯網全面解決方案也將為行業帶來持續性改變。

IOTE 2023 第二十屆國際物聯網展·深圳站將于2023年9月20-22日在深圳國際會展中心（寶安）震撼來襲，覆蓋IoT產業鏈全棧領域玩家，齊聚行業領袖與種子選手，今日三大展廳，圍繞RFID、傳感器、工業物聯網、云平臺、通信、人工智能、電子紙、泛安防等打造行業秀場。



審核編輯：劉清