[首發于智駕最前沿微信公眾號]在很多廠家的技術方案中，會提到世界模型的介紹。世界模型，就是自動駕駛系統內部用來表示外部世界并預測未來演變的一組模型或表征。換句話說，世界模型就是把傳感器看到的東西（攝像頭畫面、激光雷達點云、雷達回波、定位速度等）組織起來，變成車能“理解”和“推演未來”的內部信息，然后用這套信息去預測接下來幾秒鐘可能發生的事。

這個“內部信息”有兩種常見風格。一種是把外界拆成一堆具體對象，每個對象有位置、速度、大小、類別這些東西，然后去預測這些對象會怎么動。另一種是把環境做成一張網格或地圖（比如俯視下的占用格子），在格子上直接學它們如何變化。前者容易理解、能跟物理約束結合；后者在處理復雜道路或車流時更直觀一些。但無論哪種，目的都是讓車不僅知道“現在怎樣”，還能估計“下一秒、兩秒后可能怎樣”。

世界模型既可以是基于物理規則寫出來的，也可以是用機器學習從大量數據里學出來的。常見的做法是把這兩者結合，先用簡單的物理模型提供基線，再用學習模型去修正那些物理模型覆蓋不了的復雜行為。這樣既有解釋性，又能利用數據提升精度。

在自動駕駛里，世界模型到底做什么？

世界模型其實可以實現幾件事，第一件事是把“現在”的觀測變成穩定的信息。傳感器會有噪聲、遮擋、時間延遲等問題，世界模型會用歷史信息把這些瞬時的、零散的觀測整合成連續的狀態估計。舉個容易懂的例子，當一個行人被路邊車擋住了鏡頭一小會兒，模型不會立刻斷定人消失了，而是根據之前的速度和道路位置合理估計他的可能位置，繼續保留這個目標的存在。

第二件事是給出“多步的未來預測”。這比只看現在重要得多。預測不是只說“物體現在在哪”，而是輸出未來幾秒鐘里物體可能的軌跡。對于自動駕駛汽車來說，未來往往不止一種可能，那個行人可能繼續直走，也可能突然加速或停下。世界模型要能表示這種多樣性，告訴下游的決策模塊“有這幾種大概率發生的未來”。

第三件事是當作“模擬器”給規劃器用。規劃器在做決策時需要評估不同動作的后果。世界模型可以在車內做很多“如果……會怎樣”的試算，把候選動作代入模型，看到每種動作會帶來什么風險和結果，然后選一個既安全又高效的動作。這種方式在控制里叫模型預測控制，世界模型讓這種思路能在復雜交通里用上。

第四件事是生成訓練數據或豐富仿真。現實世界里很難收集到所有極端情況，世界模型能在仿真里復現一些復雜交互場景，幫工程師訓練感知和決策模塊，尤其是那些在現實里很少見但很重要的危險邊緣場景。

世界模型為什么重要？它會帶來哪些影響？

世界模型給自動駕駛帶來的最直觀的好處是讓系統變得更“前瞻”。當車能提前預測周圍人的下一步動作，規劃器就可以提前減速、調整軌跡，避免緊急剎車或碰撞。這也讓自動駕駛系統處理不確定性的能力變強。對于現實的交通情況來說，是非常復雜的，不確定性會很多，世界模型通常會以概率或多個備選方案來表示未來的可能，這樣自動駕駛系統不會僅依托唯一一個可能的路徑。世界模型也讓自動駕駛的工程效率得到提升，把世界動態學到模型里之后，可以在仿真里快速試驗策略，減少實車試錯成本。世界模型也讓自動駕駛的可解釋性在一定程度得到改善，尤其是采用對象級表示時，人可以比較容易看懂“為什么車做了這個決策”（因為模型預測行人會這樣做）。

當然，世界模型很大程度上會比較依賴數據。如果訓練數據里很少見某類場景，模型在這類場景上預測可能會出大偏差。此外，長時預測會積累誤差，模型每一步都可能有小錯，錯會逐步放大，幾秒鐘后預測可能完全偏離真實。這會誤導規劃器做出不合適的動作?？沈炞C性問題也是世界模型繼續解決的問題，當世界模型是一個深度網絡時，它內部的推理過程難以用傳統方法證明是安全的，這給安全認證帶來麻煩。計算與實時性更是世界模型在設計時需要解決的難題之一，多步、多模態的預測如果不做優化，算力開銷大，推理延遲高，這在實時系統里是不能接受的。

世界模型既然可以提升自動駕駛的性能，那它應如何應用到自動駕駛中？一種方法是把學習到的世界模型作為建議器，用來產生候選未來，但把最后的安全檢查和約束放在規則化的決策層或簡單可靠的安全過濾器里。還有一種方法是把世界模型盡量壓縮并優化成能在車端快速運行的版本，同時把復雜的長時預測放在云端或離線訓練里做支撐。總之，把世界模型當成輔助決策的強力工具，同時保留冗余和規則化的安全網，是當前大多數技術方案的解法。

最后的話

世界模型并不是一個遙不可及的高深概念，它更像是讓自動駕駛汽車學會“思考”的工具。有了它，自動駕駛汽車不再只是依賴當下看到的畫面去做反應，而是能結合經驗和預測，把眼前的情況和未來的變化聯系起來。這種能力，就好比讓汽車學會了“未雨綢繆”，能更冷靜、更聰明地處理復雜環境。

不管是提升自動駕駛的安全性，還是減少對昂貴傳感器和高精地圖的依賴，世界模型都可能發揮關鍵作用。未來誰能把世界模型用得更好，誰就可能在自動駕駛的競爭中走得更快、更穩。對普通人來說，世界模型最終會體現在更安心的出行體驗上，世界模型會讓你感受到，車越來越像一個真正可靠的駕駛伙伴，而不僅僅是一臺聽指令的機器。