導(dǎo)讀:Edge AI是新的發(fā)展方向,它能夠把數(shù)據(jù)處理分析過程從云端搬回本地,來避免網(wǎng)絡(luò)傳輸延遲和潛在的隱私安全問題,同時可以大大減少成本。在未來的圖像傳感器里,不僅僅包含模擬數(shù)字信號處理,人工智能算法也會被加入加快圖像傳感器的高度智能化,從而使系統(tǒng)能夠通過新的計算和決策提供更快更準(zhǔn)確的結(jié)果。而受限于端側(cè)的有限資源,我們需要更有效的算法支持來平衡計算能力和功耗。
人工智能的概念起源可以追溯到1956年,John McCarthy在達(dá)特矛斯會議上提出了“人工智能”這一概念。而在2018年前后隨著諸多人工智能專用芯片的初創(chuàng)公司出現(xiàn)、眾多具有未來感的應(yīng)用場景的曝光。..人工智能話題真正被大眾熟知和熱捧。這種廣義的AI的話題似乎在最近幾年削弱了很多,但其實在AI正在各個細(xì)分領(lǐng)域進(jìn)行下放和落地。現(xiàn)在我們可以看到,其實在各種各樣的物聯(lián)網(wǎng)端側(cè)設(shè)備中,也可以實現(xiàn)AI和ML的諸多應(yīng)用。
當(dāng)然受限于供電、算力等等端側(cè)特定場景的要求,端側(cè)AI的應(yīng)用落地需要結(jié)合端側(cè)的實際場景。最近安森美半導(dǎo)體推出的全新智能相機(jī)拍攝平臺,就給了業(yè)界一個端側(cè)AI應(yīng)用的很好啟發(fā)。近日筆者專門采訪了安森美半導(dǎo)體亞太地區(qū)方案中心的市場營銷工程師賈鵬先生,他對于RSL10這一全新平臺進(jìn)行了精彩的分享。
將AI圖片識別部署到物聯(lián)網(wǎng)端點(diǎn)
圖像識別是AI的典型應(yīng)用案例之一,在端側(cè)也有著諸多實際應(yīng)用需求。安森美半導(dǎo)體的RSL10 智能相機(jī)拍攝平臺就是為端側(cè)實現(xiàn)了圖像采集的功能,并通過低功耗藍(lán)牙來實現(xiàn)數(shù)據(jù)傳輸,通過云端AI來智能識別物體。RSL10 智能相機(jī)拍攝平臺中包含了安森美半導(dǎo)體的多個成功的芯片,其中包括藍(lán)牙低功耗的RSL10 SIP、ARX3A0 Mono 65° DFOV IAS模塊、多種傳感器芯片和電源管理芯片等。
據(jù)賈鵬先生分享,RSL10智能相機(jī)拍攝平臺最獨(dú)特的一點(diǎn)是它提供了一種超自動化應(yīng)用的典型思路:傳感器觸發(fā)(條件)- 拍攝(動作)- AI識別 - 獲取信息并處理。
我們在相關(guān)的介紹中可以看到,在實際應(yīng)用中,開發(fā)者可以將RSL10 智能相機(jī)拍攝平臺配置成一個端點(diǎn),設(shè)置特定的時間、環(huán)境變量作為觸發(fā)條件。例如在某個時間段,或者環(huán)境溫濕度達(dá)到觸發(fā)值時,平臺自動將圖像發(fā)送到云端進(jìn)行分析,云端通過圖像分析來給出相應(yīng)的反饋的決策。
據(jù)賈鵬先生分享,RSL10智能相機(jī)拍攝平臺的圖像可以上傳至亞馬遜AWS,AWS在云端提供了圖像識別服務(wù),能夠識別大部分用戶拍攝的物體,為后續(xù)的數(shù)據(jù)處理提供了可能。
雖然RSL10智能相機(jī)拍攝平臺的成品度非常高,但對于不同的客戶仍可以根據(jù)自己的實際情況在不同的步驟進(jìn)行設(shè)計,實現(xiàn)具備差異化的產(chǎn)品研發(fā)。除了安森美現(xiàn)在提供的所有相關(guān)資料之外,賈鵬先生表示安森美半導(dǎo)體的技術(shù)服務(wù)團(tuán)隊也可提供現(xiàn)場支持。
端側(cè)AI應(yīng)用需符合端側(cè)應(yīng)用條件要求
當(dāng)我們提到物聯(lián)網(wǎng)端側(cè)的應(yīng)用,功耗、成本和可靠性等都是最為重要的設(shè)計考量。同樣的,端側(cè)AI的部署也都需要考慮到這些因素。
據(jù)賈鵬先生介紹,RSL10智能相機(jī)拍攝平臺的超低功耗是其重要特點(diǎn)之一:RSL10智能相機(jī)拍攝平臺有連續(xù)拍攝和正常拍攝兩種模式,一塊1700 mAh的充電電池能夠支持它在全傳感器工作并保持藍(lán)牙低功耗(BLE)時刻連接狀態(tài)下正常使用約半年(此狀態(tài)下平均功耗小于2 mW)。
筆者還關(guān)注到RSL10智能相機(jī)拍攝平臺中搭載的ARX3A0圖像傳感器的每秒幀數(shù)可以達(dá)到360,遠(yuǎn)超現(xiàn)在主流手機(jī)的30 fps、60fps的水準(zhǔn)。但據(jù)賈鵬先生分享,ARX3A0圖像傳感器擁有的高幀率特性,主要是為了眼球跟蹤、VR/AR等需要高速攝影的應(yīng)用場景。
但在RSL10智能相機(jī)拍攝平臺中ARX3A0圖像傳感器以較低幀率就可以滿足端側(cè)的采集需求,這樣也不會對與藍(lán)牙數(shù)據(jù)傳輸即時性、整體的平臺功耗產(chǎn)生過多的壓力。當(dāng)然我們可以看到這種硬件上的參數(shù)富裕也給了設(shè)計者更多個性化發(fā)揮的空間。
賈鵬先生表示,Edge AI是新的發(fā)展方向,它能夠把數(shù)據(jù)處理分析過程從云端搬回本地,來避免網(wǎng)絡(luò)傳輸延遲和潛在的隱私安全問題,同時可以大大減少成本。在未來的圖像傳感器里,不僅僅包含模擬數(shù)字信號處理,人工智能算法也會被加入加快圖像傳感器的高度智能化,從而使系統(tǒng)能夠通過新的計算和決策提供更快更準(zhǔn)確的結(jié)果。而受限于端側(cè)的有限資源,我們需要更有效的算法支持來平衡計算能力和功耗。
對于安森美半導(dǎo)體這樣具有非常寬廣的產(chǎn)品組合的廠商而言,除了優(yōu)勢的單品外,還可以提供非常多豐富的解決方案。RSL10智能相機(jī)拍攝平臺就是其中之一,它為業(yè)界的端側(cè)AI應(yīng)用提供了很好的范例和啟示。相信我們也可以在諸多實地應(yīng)用中看到它的身影。
編輯:lyn
-
物聯(lián)網(wǎng)
+關(guān)注
關(guān)注
2945文章
47826瀏覽量
415245 -
圖像識別
+關(guān)注
關(guān)注
9文章
534瀏覽量
40069 -
AI
+關(guān)注
關(guān)注
91文章
39820瀏覽量
301495
原文標(biāo)題:端側(cè)AI應(yīng)用如何落地?RSL10智能相機(jī)拍攝平臺給出答案
文章出處:【微信號:onsemi-china,微信公眾號:安森美】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
借助谷歌LiteRT構(gòu)建下一代高性能端側(cè)AI
安霸推出開發(fā)者社區(qū)以助力部署端側(cè)AI應(yīng)用
新唐科技基于端側(cè)AI MCU M55M1的智慧門禁解決方案介紹
聚焦端側(cè)AI:看美格智能全棧能力如何支撐AI產(chǎn)業(yè)六大趨勢
端側(cè)AI推理賦能效率革命,美格智能多領(lǐng)域落地打造行業(yè)范本
端側(cè)OCR文字識別實現(xiàn) -- Core Vision Kit ##HarmonyOS SDK AI##
華邦電子創(chuàng)新存儲賦能端側(cè)智能端側(cè)
端側(cè) AI 芯片:終端智能落地的核心引擎
首創(chuàng)開源架構(gòu),天璣AI開發(fā)套件讓端側(cè)AI模型接入得心應(yīng)手
市場上主流的端側(cè)AI MPU 大全
炬芯科技探索端側(cè)AI技術(shù)與應(yīng)用
AI大模型端側(cè)部署正當(dāng)時:移遠(yuǎn)端側(cè)AI大模型解決方案,激活場景智能新范式
AI大模型端側(cè)部署正當(dāng)時:移遠(yuǎn)端側(cè)AI大模型解決方案,激活場景智能新范式
將AI圖片識別部署到物聯(lián)網(wǎng)端側(cè)與端側(cè)應(yīng)用條件要求
評論