DeepMind的科學家們進行了相關研究，并在Arxiv.org上發(fā)表了一篇論文。

論文鏈接：

https://arxiv.org/pdf/1906.05930.pdf

論文中，他們使用自上而下的視覺信息將地面視圖語料庫訓練的人工智能策略應用到城市目標區(qū)域，并認為這種方法很值得推廣。

論文的共同作者說，他們的靈感源自一個發(fā)現(xiàn)，即人類可以通過看地圖來快速適應一個新城市。

作者在論文里寫道，在陌生的環(huán)境里，通過視覺觀察進行導航是AI導航的核心，這也是一項持續(xù)存在的挑戰(zhàn)。到目前為止，目標驅(qū)動的AI導航還不能在沒有大量訓練的情況下進行高精度導航，但是單純依靠模擬訓練并不是一種有前景的解決方法。他們的核心理念是將地面視圖與航空視圖匹配，學習跨視圖轉(zhuǎn)換的聯(lián)合策略。

研究人員首先收集區(qū)域航空視圖，根據(jù)相應的地理坐標與街道視圖進行匹配。接下來，他們著手進行一個轉(zhuǎn)移學習任務，該任務通過觀測航空視圖目標區(qū)域獲得數(shù)據(jù)并進行適應性訓練，最后使用地面視圖觀察轉(zhuǎn)移到目標區(qū)域。

研究團隊的機器學習系統(tǒng)包括三個模塊，負責視覺感知的卷積模塊，捕獲特定位置特征的長短期記憶網(wǎng)絡（LSTM）模塊，以及產(chǎn)生動作分布的策略循環(huán)神經(jīng)模塊， 它現(xiàn)已被應用于StreetAir。StreetAir是一個來自谷歌街景和谷歌地圖的交互式第一視角全景街景照片集，它的技術基礎建立在StreetLearn之上。在StreetAir和StreetLearn中，人們可以看到紐約市中心的航拍圖像，同樣的，系統(tǒng)根據(jù)緯度和經(jīng)度坐標，返回了一個匹茲堡的阿勒格尼河和卡內(nèi)基梅隆大學校園的84 x 84航拍圖像，與位于該位置的地面視圖圖像大小相同。

一旦人工智能系統(tǒng)經(jīng)過訓練，其任務是學習本地化并在給定目的地緯度和經(jīng)度坐標的情況下展示街道全景圖。覆蓋兩側(cè)2-5公里區(qū)域的全景圖間隔約10米，AI導航每次可進行以下五種動作中的一種：向前移動，向左轉(zhuǎn)22.5度，向右轉(zhuǎn)22.5度，向左轉(zhuǎn)67.5度，向右轉(zhuǎn)67.5度。若順利導航至目的地100-200米范圍內(nèi)，AI將獲得獎勵。

在實驗中，利用航空圖像來適應陌生環(huán)境的AI獲得的獎勵明顯高于僅使用地面圖像數(shù)據(jù)的AI。研究人員認為，這表明他們的方法顯著提高了AI獲取目標城市道路信息的能力。

研究團隊表示，與單視圖（地面視圖）相比，他們的方法將更好地將AI導航應用于未知街道，具有更高的零樣本學習回報（不需要在地面視圖上進行訓練即可轉(zhuǎn)移）和更好的整體表現(xiàn)（在轉(zhuǎn)移期間仍能進行連續(xù)訓練）。