這項技術讓可穿戴設備在劇烈運動、水下等復雜環境中,依然能實現精準手勢識別和機械臂控制,為虛擬現實、康復醫療、工業救援等領域打開了新大門。
直擊痛點:運動干擾是手勢識別的“敵人”
智能手表、運動手環等可穿戴設備早已融入生活,但傳統慣性測量單元(IMU)始終繞不開一個核心問題——抗干擾能力弱。
當你跑步時,前臂的自然擺動會產生運動偽影;乘坐交通工具時,環境振動會干擾信號;甚至簡單的姿勢變化,都可能因為重力矢量改變導致設備方向偏移。
這些干擾信號要么和手勢信號頻率相近,要么幅度更大,很容易“淹沒”真實指令,而且不同人的動作習慣差異大,進一步降低了識別準確率,讓運動場景下的人機交互淪為“擺設”。
在工業作業、康復訓練等專業場景中,這個問題更顯致命。想象一下,救援人員在奔跑中想控制無人機探查險情,卻因信號干擾頻頻誤操作;康復患者試圖通過手勢控制輔助器械,卻被身體晃動影響指令傳遞——傳統設備的局限性,一直制約著人機交互的實用性。
雙重創新:硬件+AI打造“抗干擾神器”
為了攻克這一難題,研究團隊給出了“硬件革新+算法優化”的雙重解決方案,讓可穿戴傳感器兼具“靈活性”與“智慧腦”。
迷你可拉伸傳感器
薄如紙片,戴感舒適,集成了六通道 IMU、肌電信號(EMG)模塊、藍牙微控制器單元和可拉伸電池,能夠無線捕獲和傳輸手勢信號。
這款傳感器尺寸僅1.8×4.5平方厘米,厚度2毫米,拉伸性超過20%,貼在前臂完全不影響活動。它采用四層精巧設計,每層各司其職:第一層為電池層,充放電60次后仍能穩定工作,庫侖效率接近100%;第二層包含天線匹配單元和EMG采集模塊,使用了三層電極結構,確保信號采集的穩定性;第三層集成了六通道 IMU 和藍牙微控制器單元,用于信號處理和無線傳輸。在開放環境中,藍牙在20米距離內信號穩定,連續運行30分鐘最高溫度僅27.7℃,佩戴1小時皮膚溫度保持34.5℃,安全無負擔。

系統整體結構與性能
深度學習算法
抗干擾的核心,在于背后的AI“大腦”。團隊構建了包含19種前臂手勢,以及跑步、高頻振動、姿勢變化等干擾信號的復合數據集,訓練深度學習網絡。最終選定的LeNet-5卷積神經網絡表現最優,召回率超0.92,精確度超0.93,特異性更是高達0.99。
針對不同人的個體差異,研究團隊還引入遷移學習技術:只需每個手勢提供2個樣本(坐姿和躺姿各一個)進行微調,就能將手勢識別準確率從51%提升至92%以上,數據收集時間也從2分鐘縮短到6秒,大幅降低了使用門檻。
場景實測:跑步、水下都能精準控設備
這項技術的實力,在真實場景測試中得到了充分驗證。在實時控制測試中,系統采用滑動窗口機制實現連續手勢識別:手勢信號無線傳輸延遲約1毫秒,AI模型預測僅需1毫秒,收到三個連續相同預測后,機械臂275毫秒內就能做出響應。即便測試者在跑步機上劇烈跑步,前臂晃動劇烈,系統仍能精準控制機械臂完成抓取小瓶等精細動作。

具有運動偽影的實時機械臂控制
更令人驚喜的是其水下應用潛力。研究團隊利用海浪模擬器獲取各種海浪干擾信號,構建專屬數據集訓練模型。測試中,潛水員在海浪干擾下,能精準控制水下機器人開展目標跟蹤、沉船檢查等任務。而海水還能降低電極-皮膚阻抗,進一步提升肌電信號質量,讓水下交互更順暢。
未來可期:重塑多領域人機交互模式
這項抗干擾人機交互技術的突破,不僅解決了可穿戴設備的“老大難”問題,更在多個領域展現出變革性潛力。在醫療康復領域,它能讓肢體活動不便的患者,在日常活動中精準控制康復器械,助力功能恢復;在工業場景中,工人可在高動態作業環境下免手持控制工具,提升作業安全性與效率;在消費電子領域,未來的智能手表、VR設備將擺脫靜止狀態的使用限制,運動中切歌、跑步時操控設備都能精準響應。
從實驗室到真實場景,從陸地到水下,這項由華人團隊主導的研究,用“硬件+AI”的創新思路,打破了人機交互的環境限制。隨著技術的進一步完善,或許不久后,我們就能在任何場景下,與智能設備實現“心有靈犀”的順暢溝通。
來源:上海宏勃生物科技發展有限公司
-
傳感器
+關注
關注
2573文章
54228瀏覽量
784761 -
手勢識別
+關注
關注
8文章
232瀏覽量
48696 -
慣性測量單元
+關注
關注
2文章
68瀏覽量
10931
發布評論請先 登錄
DS4-PPB級異味傳感器精準感知,洞察無形氣味風險
新型生物傳感器問世:使用手機即可檢測皮質醇水平,比醫院檢測還準
機器人競技幕后:磁傳感器芯片激活 “精準感知力”
同濟大學:仿生納米通道氣凝膠晶體管,突破生物傳感靈敏度極限
華中科技大學:研發新型熒光傳感器,實現肉類腐敗可視化監測
北京理工大學生命學院:研發新型電化學生物傳感器,聚焦血糖監測技術突破
上海交通大學:在高穩定納米光學生物分子傳感器方向取得進展
上海大學:可于復雜生物環境中實時監測生物標志物的即用型OECT生物傳感器
貿澤開售STMicroelectronics新型生物傳感器ST1VAFE3BX
清華大學深圳國際研究生院、新加坡國立大學:研發新型的超材料生物傳感器件最新設計制備
一種高靈敏的化學檢測系統

加州大學圣地亞哥分校:研發新型傳感器,實現阿摩爾級生物分子精準檢測
評論