導語:FantoVision:專屬高速邊緣 AI 視覺系統
友思特合作伙伴Gidel在FantoVision20/40取得市場成果后,針對工業視覺的更高帶寬需求,全新推出三款專屬機型,分別深度優化CoaXPress-12、10GigE Vision和Camera Link接口。該系列旨在突破Jetson Orin NX平臺的I/O性能瓶頸,通過“FPGA+Jetson”架構,將高速圖像采集、預處理與AI推理在邊緣端高效結合,為多相機、高帶寬應用提供確定性的穩定算力,實現真正的邊緣實時智能。
問題拆解:為什么 Jetson I/O 會出現性能瓶頸
NVIDIA Jetson Orin NX 雖能實現卓越的邊緣 AI 視覺性能,但其數據接入能力卻受限于標準接口。如今的工業相機傳輸速率早已突破 10 Gb/s,數據包傳輸量達每秒數百萬幀;而 Jetson 搭載的 ARM 處理器,必須通過軟件完成所有中斷處理、數據包解碼與圖像幀重構工作。
這一機制直接為 Jetson 的最大數據接收量劃定了硬性上限。一旦觸及I/O 性能瓶頸的閾值,相機數據流便會出現丟幀、時延增加的問題;同時,CPU 過載和硬件熱負載壓力,將直接導致 AI 算力性能斷崖式下跌。
Gidel 創新架構成功突破這一瓶頸:將數據包處理、協議解析與原始數據傳輸等核心任務,全部遷移至確定性的 FPGA AI加速器中完成。這一技術重構,徹底刷新了現代邊緣視覺系統的性能邊界。
傳統系統在高帶寬工況下會出現 CPU 負載飽和,而 FantoVision 依托 FPGA 算力卸載技術,可將 CPU 負載始終控制在 25% 以內,一舉突破 I/O 性能瓶頸。
行業痛點:Jetson 陷入像素數據處理困局
高端機器視覺解決方案,尤其是搭載邊緣視覺 AI 的方案,不僅需要強勁的算力支撐,更要實現穩定的高帶寬圖像采集。
傳統嵌入式系統中,CPU 被迫承擔起圖像采集卡的核心工作。當數據流速率達到 10 Gb/s、20 Gb/s乃至 50 Gb/s時,ARM 架構 CPU 會將絕大部分算力,耗費在中斷處理、數據包頭剝離與數據拷貝的工作中。這類額外產生的算力開銷,稱為CPU 算力損耗。
1.高帶寬采集引發的 CPU 算力損耗:在基于軟件的采集模式下,每一個傳入的數據包都會觸發 CPU 執行相應處理操作。當數據包的傳輸量達到每秒數百萬幀時,CPU 單核心利用率極易飆升至 100%。這會導致處理器幾乎沒有余量,去執行推理運算、應用邏輯處理、PLC 通信及數據壓縮等核心任務。若是多相機協同采集的應用場景,該問題會進一步加劇,往往引發畫面丟幀或系統運行失穩。

多相機擴展瓶頸:傳統系統中新增相機,會導致 CPU 負載急劇攀升;而 FantoVision 不受相機接入數量影響,始終保持平穩、高效的負載表現。
2. 時延與同步難題:工業成像對系統延時的確定性有著嚴苛要求。傳統操作系統會產生毫秒級的時延抖動,這類抖動不僅會破壞多相機的同步機制、中斷高速檢測流程,還會導致圖像采集、PLC與機器人運動之間,無法實現精準的時序協同。

流水線時延:CPU 端的傳統串行處理模式易形成性能瓶頸,FantoVision 的 FPGA 流水線可對數據進行并行處理,大幅降低系統時延。

幀穩定性:傳統系統在持續高負載工況下,會因緩沖區溢出發生丟幀現象;FantoVision 可長期保持零丟幀的穩定運行狀態。
尤為關鍵的是,當 CPU 因時延抖動與中斷處理任務不堪重負時,畫面便會出現丟幀。這類數據丟失問題,在醫療成像、國防軍工及高速檢測類應用場景中是絕對無法接受的
3. 熱效應影響:CPU 高負載運行會導致設備散熱量大幅攀升。當圖像采集產生的算力開銷大于設備的熱功耗預算時,Jetson 將無法持續輸出 157 TOPS 的滿額算力。此時硬件熱節流現象將無可避免,最終造成系統在實際生產工況下,始終無法達到設計預期的 AI 算力水準。
解決方案:邊緣 AI 視覺系統中的異構計算架構
每款 FantoVision 機型均集成NVIDIA Jetson Orin NX 與 Intel Arria 10 FPGA,打造出異構邊緣 AI 視覺系統,實現 GPU、CPU、FPGA 三大核心算力單元的精準分工。
FPGA 絕非被動外設, 而是一套智能I/O引擎
邊緣 AI 視覺的優化采集路徑實現 CPU 負載最小化
FPGA 完成相機協議解析、時序同步管控、數據完整性校驗,并通過 DMA 技術將數據直傳至 Jetson 內存,供 GPU 直接調用;僅在整幀數據全部就緒后,才向 CPU 發出通知。
這一架構徹底省去軟件層面的數據包處理環節,即便在持續高吞吐工況下,也能將 CPU 的采集負載控制在 25% 以內。最終實現 CPU 溫度更低、系統運行更穩定,同時為邊緣 AI 視覺推理提供更大的硬件散熱余量。

AI 算力余量:傳統系統中居高不下的 CPU 算力開銷,會直接損耗可用的 AI 算力;FantoVision 可徹底解鎖 157 TOPS 的滿額算力,為算法運行提供全量算力支撐。
基于 FPGA 的預處理與流傳輸技術
FPGA 可實現板載ISP處理及其他像素密集型運算任務,進一步降低 Jetson 的 CPU 負載,確保系統延時可控,保證實時運行性能。核心功能包含:
圖像處理:支持Debayer、非均勻性校正(NUC)、壞點替換(BPR)、白平衡、伽馬校正、高動態范圍(HDR)校正及動態亮度均衡。
RTSP 流輸出:系統兼容實時流傳輸協議(RTSP)輸出,可向遠程客戶端或控制中心推送低時延視頻流,完美適配無人機、安防監控類應用場景。
數據優化:支持感興趣區域(ROI)裁剪、圖像縮放,以及 JPEG 壓縮、無損壓縮、Quality + 畫質增強壓縮等多種數據壓縮方式。

Gidel壓縮技術優勢:Gidel實時壓縮技術可大幅降低帶寬占用與存儲資源需求,同時支持 JPEG 壓縮比靈活調節,實現圖像畫質與文件體積的精準平衡。
FantoVision系統優勢
傳統 Jetson 系統 vs Gidel FantoVision 邊緣 AI 視覺系統

FantoVision 規格總覽
本系列機型為有需求的開發者,提供面向專屬接口深度優化的解決方案,助力機器視覺方案實現極致性能、高可靠性與確定性運行表現。
FantoVision 機型規格總覽

緊湊堅固設計,適配各類極限工況
FantoVision 系列的核心優勢,不僅體現在卓越的電子性能上;更通過專業工業設計實現強悍的物理防護能力,可從容應對各類嚴苛的應用環境。
極致 SWaP-C 優化,極致小型輕量化
審核編輯 黃宇
-
FPGA
+關注
關注
1660文章
22408瀏覽量
636211 -
接口
+關注
關注
33文章
9519瀏覽量
157015 -
AI
+關注
關注
91文章
39755瀏覽量
301354
發布評論請先 登錄
英飛凌為NVIDIA Jetson邊緣AI平臺提供AIROC? Wi-Fi/藍牙?解決方案
以FPGA為核心的機器視覺系統設計方案
【HarmonyOS HiSpark AI Camera】紡織專用機器視覺系統
GTC23 | 使用 NVIDIA Jetson Orin Nano 開發套件開發 AI 機器人及智能視覺系統
【虹科新品】結合FPGA和NVIDIA Jetson Orin NX 系統的視覺邊緣計算機
【虹科新聞】虹科Gidel FantoVision獲得2023年視覺系統設計獎
虹科Gidel的FantoVision邊緣計算機可輕松使用NVIDIA Jetson模塊
友思特新品 | 世界上第一個夜間和全天候攝像的汽車門控視覺系統
友思特方案 精析“蟬翼”:FPGA圖像處理方案助力鋰電池高速產線檢測新升級
友思特方案 | FPGA 加持,友思特圖像采集卡高速預處理助力視覺系統運行提速增效
友思特方案 | 突破 Jetson平臺的接口性能瓶頸,Gidel 基于FPGA的高速邊緣AI視覺系統
評論