10月8日至10日，“CV界”盛宴VALSE 2021（視覺與學習青年學者研討會）在杭州國際博覽中心舉行。大會金牌贊助商奧比中光攜3D智能摳圖算法、開發者套件等全新技術方案與產品，以“感知·3D全視界”為主題參展，吸引現場青年學者與專業觀眾駐足交流。9日上午，奧比中光研究院算法團隊負責人錢貝貝博士在大會上發表了《3D視覺 更懂世界——從感知到認知》的演講，分享了奧比中光3D視覺感知技術從深度信息獲取到三維重建、落地應用過程的研發突破。

精細到頭發絲，奧比中光3D智能摳圖算法來了

在演講中，錢貝貝博士圍繞3D感知、3D重建、3D識別等話題，分享了奧比中光3D視覺感知技術的基本原理與公司最新算法研發突破。基于硬件級的高精度3D信息與前沿深度估計算法，奧比中光可實現基于紋理增強的三維人臉重建、人體重建，并通過3D識別算法開發出各類3D智能應用。

今年3月，奧比中光研究院徐玉華博士在CVPR發表論文 “Bilateral Grid Learning for Stereo Matching Networks”，提出了一種能夠以高分辨率回歸視差圖的方法，可在雙目深度估計過程中同時保持高效率與高精度，顯著改善了傳統方法在弱紋理、邊緣情況下深度估計不準、信息缺失等情況，使得深度圖更加完整。

奧比中光研究院算法團隊負責人錢貝貝博士在VALSE 2021發表演講。

現場，錢貝貝博士展示了團隊最新研發的3D智能摳圖算法全新技術方案。該方案實現了基于背景建模的輕量化前景摳圖，能夠同時摳取清晰的3D人像及物品，可廣泛用于直播帶貨、視頻會議、游戲渲染、場景理解、自動駕駛、目標跟蹤、混合顯示、電影制作等場景。

錢貝貝博士介紹，主播在直播帶貨場景中同時要售賣許多款商品，在摳圖時，如果用傳統2D摳圖常用的語義分割、顯著性檢測等方式，容易受物品類別及顯著性等限制，難以準確從雜亂的背景中摳取主播與商品。奧比中光通過背景+人圖軟分割的方法，設計了輕量化的Stage Block網絡框架，并基于大量數據訓練，實現了人、物與背景的精確分割，并可根據不同需求平衡摳圖的精度與速度。

在真實數據集的測試表現中，相比于其它方式，基于背景建模的輕量化前景摳圖的各方面數據都有了顯著提升，其FLOPs降低89.9%，Param降低 87.7%。

圖注：基于背景建模的輕量化前景摳圖與其它方式效果對比。

除了能同時摳取人像與物品，摳取自定義距離背景也是奧比中光3D智能摳圖的一大亮點。3D摳圖支持用戶自定義摳圖距離，可過濾掉背景中不相關的人物，起到保護隱私的作用。如用戶在家中參加視頻會議時，可以調整3D摳圖距離，不讓其他參會者看到自己的家庭成員。

圖注：現有在線視頻會議軟件中的2D摳圖和奧比中光3D摳圖效果對比。

此外，錢貝貝博士介紹，3D智能摳圖對于細節的還原也更為精確，可以更好地摳取頭發、手指等細節。“這是由于3D相機采集的深度信息為算法提供了先驗信息，有利于算法將細節處摳取得更為完整。相比之下，2D摳圖算法容易導致細節丟失，需要配合更高的分辨率才能夠摳取細節，但更高的分辨率會導致算法速度變慢，體驗變差。”

圖注：觀眾在奧比中光展位上觀看3D智能摳圖算法演示。

iToF應用開發DIY，奧比中光開發者套件也來了

在VALSE 2021展位現場，奧比中光還帶來了iToF開發者套件及3D視覺機器人開發套件等產品，獲得不少開發者駐足和青睞。

今年9月，奧比中光發布iToF智能視覺平臺，提供從芯片、模組、智能算法到整機的全棧式方案，滿足了AIoT多元化的iToF方案需求。在VALSE 2021上展出的iToF開發者套件包含奧比中光基于iToF智能視覺平臺開發的相機Femto，搭載高品質iToF感光芯片，適用于0.2m-5m距離內3D對象掃描及深度數據測量，可用于開發視頻安防監控、掃地機器人、3D掃描、物流包裹檢測等產品應用。

圖注：觀眾在奧比中光展位上觀看Femto、開發者套件等產品演示。

另一款ORBBEC MR100則是以3D視覺硬件及軟件算法為基礎的移動機器人開發平臺。ORBBEC MR100搭載了奧比中光Astra Pro深度相機、單線激光雷達、英偉達Jetson nano高性能處理器、串聯機械臂、柔性機械爪等部件，內置ROS melodic系統，支持3D人體骨骼識別、3D視覺目標跟隨、物體識別、三維空間重建與導航等，還可以運行深度學習，支持拓展語音交互等功能。

圖注：現場觀眾了解奧比中光3D視覺機器人開發套件小車。

在VALSE 2021展位上，奧比中光現場開啟了3D視覺開發者社區與人才招聘直達入口，為眾多有志于3D視覺行業的青年人才提供了專業渠道。

西安電子科技大學研一學生董天成表示，“對奧比中光的3D視覺技術很感興趣，未來會繼續關注3D視覺開發者社區，希望畢業后有機會去奧比中光西安研究院工作。”
fqj