廣和通要聞
疊衣服、整理家務(wù)……這些看似簡單的日常任務(wù),對機(jī)器人而言卻是巨大的技術(shù)挑戰(zhàn)。如何讓機(jī)器人快速學(xué)會(huì)疊衣服?廣和通具身智能開發(fā)平臺(tái)Fibot以堅(jiān)實(shí)的硬件基礎(chǔ)、高效易上手的開發(fā)框架和精準(zhǔn)的算法能力,僅需3小時(shí)即教會(huì)機(jī)器人這項(xiàng)本領(lǐng)。
多模態(tài)感知到策略學(xué)習(xí):快速實(shí)現(xiàn)家務(wù)控制
Fibot基于多模態(tài)感知與流匹配(Flow Matching)策略學(xué)習(xí)的家務(wù)場景控制框架。以疊衣服為例,F(xiàn)ibot從前、左腕、右腕等3個(gè)關(guān)鍵視角采集圖像,并提取高維視覺特征。同時(shí),語言指令(如 “fold shirt”)作為文本模態(tài)輸入至視覺語言模型(VLM),與視覺特征進(jìn)行跨模態(tài)融合,構(gòu)建任務(wù)語義與場景幾何的聯(lián)系。融合后的多模態(tài)輸入至基于 Flow Matching 的控制模型,從而實(shí)現(xiàn)更穩(wěn)定、更可控的動(dòng)作生成,驅(qū)動(dòng)機(jī)器人執(zhí)行精細(xì)的雙腕折衣策略。整個(gè)系統(tǒng)利用視覺、文本等多模態(tài)感知,實(shí)現(xiàn)了語義理解—?jiǎng)討B(tài)軌跡生成的端到端機(jī)器人控制流程。
開發(fā)效率:從“一鍵部署”到高效訓(xùn)練的革命
廣和通通過技術(shù)創(chuàng)新,極大降低了具身智能的開發(fā)門檻。Fibot具備完善、友好的采訓(xùn)推代碼,支持一鍵部署,開發(fā)者只需一行指令即可實(shí)現(xiàn)數(shù)據(jù)采集、訓(xùn)練和推理的全流程,無需復(fù)雜環(huán)境配置和底層調(diào)試。
Fibot構(gòu)建的 “示教-復(fù)現(xiàn)”數(shù)據(jù)閉環(huán),使其能夠高成功率實(shí)現(xiàn)復(fù)雜任務(wù)。這一機(jī)制允許機(jī)器人通過模仿學(xué)習(xí)快速掌握操作技能,縮短了從演示到實(shí)際執(zhí)行的路徑,為復(fù)雜場景下的任務(wù)執(zhí)行奠定了基礎(chǔ)。
精準(zhǔn)遷移:從云端到真機(jī)的無縫銜接
算法從云端到真機(jī)環(huán)境的遷移,一直是機(jī)器人領(lǐng)域的難點(diǎn)。Fibot通過底層通信與控制硬件的深度優(yōu)化,實(shí)現(xiàn)了這一過程的精準(zhǔn)、穩(wěn)定過渡。Fibot還集成了多種深度學(xué)習(xí)AI算法,結(jié)合高效的感知系統(tǒng)與智能決策框架。這套系統(tǒng)保障了全向移動(dòng)穩(wěn)定性,RTOS低時(shí)延響應(yīng)支撐精準(zhǔn)操作控制,并依托端側(cè)AI算力實(shí)現(xiàn)本地化模型推理。從而構(gòu)建了感知-移動(dòng)-操作-算力一體化的硬件底座。
實(shí)戰(zhàn)驗(yàn)證:復(fù)雜任務(wù)場景的高效突破
在實(shí)際家務(wù)場景中,F(xiàn)ibot展現(xiàn)了驚人的學(xué)習(xí)效率。以疊衣服為例,F(xiàn)ibot只需要3個(gè)小時(shí)的數(shù)據(jù)進(jìn)行微調(diào),就能達(dá)到令人滿意的效果。這種高效學(xué)習(xí)能力源于框架的優(yōu)化和算法的創(chuàng)新。同時(shí),F(xiàn)ibot還具備自主糾錯(cuò)及適應(yīng)不同環(huán)境光線的能力,使其能夠在動(dòng)態(tài)變化的真實(shí)環(huán)境中穩(wěn)定工作,不再局限于精心控制的實(shí)驗(yàn)室條件。
未來,F(xiàn)ibot將應(yīng)用于具身智能企業(yè)研發(fā)、高校科研、開發(fā)者調(diào)測等場景,幫助客戶高效構(gòu)建與驗(yàn)證端到端模仿學(xué)習(xí)算法,并采集模仿動(dòng)作數(shù)據(jù)集。隨著Fibot在具身智能領(lǐng)域的不斷深耕,廣和通正持續(xù)推動(dòng)智能機(jī)器人在復(fù)雜現(xiàn)實(shí)環(huán)境中學(xué)習(xí)和執(zhí)行任務(wù)的能力邊界。
廣和通始創(chuàng)于1999年,是中國首家A+H股上市的無線通信模組企業(yè)(300638.SZ|0638.HK)。廣和通以無線通信與人工智能為技術(shù)底座,提供軟硬件一體、賦能行業(yè)應(yīng)用的全棧式解決方案,加速千行百業(yè)從“萬物互聯(lián)”到“萬物智聯(lián)”。廣和通全棧式解決方案覆蓋蜂窩通信、AI、車載、GNSS模組及AI工具鏈,支持行業(yè)端側(cè)和主流大模型接入,提供智能體、全球資費(fèi)與云服務(wù),助力智能機(jī)器人、消費(fèi)電子、低空經(jīng)濟(jì)、智能駕駛、智慧零售及智慧能源等行業(yè)數(shù)智化升級(jí)。
-
機(jī)器人
+關(guān)注
關(guān)注
213文章
31079瀏覽量
222209 -
AI
+關(guān)注
關(guān)注
91文章
39793瀏覽量
301381 -
廣和通
+關(guān)注
關(guān)注
4文章
855瀏覽量
14572
原文標(biāo)題:廣和通Fibot如何3小時(shí)教會(huì)雙臂機(jī)器人疊衣服?
文章出處:【微信號(hào):Fibocom,微信公眾號(hào):廣和通FIBOCOM】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評(píng)論請先 登錄
破解柔性生產(chǎn)難題:知識(shí)驅(qū)動(dòng)具身智能工業(yè)機(jī)器人的實(shí)戰(zhàn)應(yīng)用指南
廣汽集團(tuán)成立具身智能機(jī)器人公司慧侖科技
具身智能交流會(huì)
資訊速遞 | 具身智能PMC(籌)發(fā)布“零成本”開源鴻蒙智能機(jī)器人系統(tǒng)
具身智能大算力開發(fā)平臺(tái)S600重磅亮相,地瓜機(jī)器人引領(lǐng)端云一體機(jī)器人進(jìn)化新范式
廣和通斬獲具身智能家務(wù)機(jī)器人黑客松競賽二等獎(jiǎng)
【「AI芯片:科技探索與AGI愿景」閱讀體驗(yàn)】+具身智能芯片
廣和通發(fā)布新一代具身智能開發(fā)平臺(tái)Fibot
阿普奇加入江蘇省具身智能機(jī)器人產(chǎn)業(yè)聯(lián)盟,成為理事單位
瑞可達(dá)榮獲具身智能機(jī)器人技術(shù)先鋒獎(jiǎng)
盤點(diǎn)#機(jī)器人開發(fā)平臺(tái)
具身智能工業(yè)機(jī)器人:引爆制造業(yè)‘自進(jìn)化’革命
廣汽集團(tuán)重磅發(fā)布具身智能機(jī)器人核心部件 一體式關(guān)節(jié)產(chǎn)品和低壓伺服驅(qū)動(dòng)器
廣和通具身智能開發(fā)平臺(tái)Fibot實(shí)現(xiàn)雙臂機(jī)器人疊衣服
評(píng)論