2023年7月8日，自動駕駛新勢力Tier 1 魔視智能MOTOVIS創始人&CEO虞正華博士受邀參加「2023 WAIC大模型與智能駕駛創新高端閉門會」，與參會人員深度探討AI大模型在智能駕駛領域的關鍵應用、技術挑戰、協同創新等時下熱點。

本場閉門會以“智能駕駛新征程——大模型賦能下的商業化機遇與挑戰”為題，由世界人工智能大會組委會辦公室、上海市張江科學城建設管理辦公室指導，上海張江（集團）有限公司、機器之心聯合主辦，旨在助力產業鏈企業更好地把握大模型發展趨勢，推動企業間的業務合作與交流，加速智能駕駛商業化進程，為張江的「未來車生態」注入新的活力。

大模型在許多領域展示出了巨大的應用潛力，但在智能駕駛領域至今還未展現出一個非常成功的智能駕駛大模型。智能駕駛作為一個充滿挑戰和機遇的領域，與大模型的結合將碰撞出怎樣的火花？

虞正華博士指出，目前確實有很多視覺大模型的嘗試，包括在圖像識別、實時目標檢測和跟蹤方面以及圖像合成、圖像修復、圖像增強等應用的進展，但未來自動駕駛的大模型一定不是純視覺的大模型，還需要綜合視覺、語言等多模態技術。

未來的端到端的自動駕駛大模型，是否能將規劃閉環在內還不確定，但是至少可以考慮將感知和預測放在一個端到端的模型中，將這個問題定義為一個泛感知問題，而這個模型的目標就是感知外部的世界，包括現在的和未來的（預測的）目標，為規劃提供基礎信息。

將語言大模型的“推理”能力跟視覺大模型的“感知”能力去結合，并進一步演變下去，發展成為真正的智能駕駛大模型。這種結合大模型推理能力和環境感知能力的智能駕駛系統，能夠在實時感知、決策制定和控制執行方面發揮重要作用。然而，實現自動駕駛仍需綜合考慮多個因素，如硬件平臺、安全性、法律法規等。