3月23日-24日，2024全球開發(fā)者先鋒大會(huì)（GDC）在上海舉行。由巖山科技旗下巖芯數(shù)智主辦的大會(huì)同期活動(dòng)“大模型技術(shù)創(chuàng)新與應(yīng)用探索講壇”順利召開，來自政、企、學(xué)各界的專家與領(lǐng)軍人物齊聚一堂，共話大模型發(fā)展。

開場(chǎng)環(huán)節(jié)，上海市人工智能行業(yè)協(xié)會(huì)副秘書長徐琦進(jìn)行了講話，指出大模型在自然語言處理、圖像識(shí)別、無人駕駛、醫(yī)療診斷等領(lǐng)域展現(xiàn)出巨大潛力。巖芯數(shù)智董事長陳代千為活動(dòng)進(jìn)行了致辭，“期望借此加深行業(yè)內(nèi)合作與碰撞，激發(fā)更多的創(chuàng)新思維和靈感火花，推動(dòng)人工智能大模型行業(yè)邁向新的高度，構(gòu)建開創(chuàng)安全高效的多模態(tài)人工智能新生態(tài)。”

圍繞如何更好地開發(fā)和利用大模型，切實(shí)推動(dòng)大模型的創(chuàng)新應(yīng)用，講壇嘉賓紛紛介紹了各自領(lǐng)域的研發(fā)和實(shí)踐。其中，針對(duì)“大模型的規(guī)模化應(yīng)用與挑戰(zhàn)”，Nullmax首席科學(xué)家成二康博士分享了在自動(dòng)駕駛大規(guī)模落地方面的經(jīng)驗(yàn)，并介紹了基于大模型打造下一代自動(dòng)駕駛形態(tài)的技術(shù)思考，通過生成式、提示學(xué)習(xí)以及人類反饋強(qiáng)化學(xué)習(xí)，實(shí)現(xiàn)體驗(yàn)更佳、開發(fā)效率更高的大規(guī)模自動(dòng)駕駛。

基于大模型打造下一代自動(dòng)駕駛

大模型在眾多領(lǐng)域表現(xiàn)出了非凡的應(yīng)用價(jià)值，自動(dòng)駕駛作為AI應(yīng)用的集大成者，也是最適合開展大模型創(chuàng)新應(yīng)用的領(lǐng)域之一。現(xiàn)場(chǎng)，成二康博士分享了Nullmax基于大模型打造下一代自動(dòng)駕駛形態(tài)的思考。

在Nullmax看來，構(gòu)建以大模型為基礎(chǔ)的下一代自動(dòng)駕駛形態(tài)，不僅可以更好地理解物理世界和人類駕駛行為，實(shí)現(xiàn)更高級(jí)的自動(dòng)駕駛。同時(shí)，在面對(duì)不同客戶的需求時(shí)，也能夠更高效地完成方案的開發(fā)，顯著降低整體的開發(fā)成本。

為此，Nullmax通過三方面的技術(shù)布局，打造以大模型為基礎(chǔ)的下一代自動(dòng)駕駛技術(shù)形態(tài)。一是構(gòu)建強(qiáng)大的世界模型，更好、更真實(shí)地生成豐富的自動(dòng)駕駛數(shù)據(jù)；二是將基礎(chǔ)模型與提示學(xué)習(xí)相結(jié)合，實(shí)現(xiàn)平臺(tái)化的交付；三是通過人類反饋強(qiáng)化學(xué)習(xí)，大規(guī)模地閉環(huán)學(xué)習(xí)人類駕駛行為，提升自動(dòng)駕駛的智能水平。

由于自動(dòng)駕駛模型的訓(xùn)練，尤其是端到端自動(dòng)駕駛模型的訓(xùn)練，依賴于大量的數(shù)據(jù)。而數(shù)據(jù)的采集、標(biāo)注，需要大量的時(shí)間和成本，并且部分?jǐn)?shù)據(jù)難以獲取。因此，Nullmax正在構(gòu)建一個(gè)強(qiáng)大的世界模型，既可以生成未來時(shí)刻的視頻，也能理解人類的駕駛行為，通過這種生成式的方式，來高效獲得自動(dòng)駕駛需要的海量感知、規(guī)控?cái)?shù)據(jù)。

在這一基礎(chǔ)上，Nullmax同樣在打造一個(gè)能夠理解靜態(tài)場(chǎng)景、動(dòng)態(tài)場(chǎng)景以及駕駛行為的基礎(chǔ)模型，并且結(jié)合提示學(xué)習(xí)，實(shí)現(xiàn)同一基礎(chǔ)模型衍生不同自動(dòng)駕駛產(chǎn)品的技術(shù)構(gòu)想，提升落地效率。當(dāng)面對(duì)不同的需求時(shí)，這套技術(shù)架構(gòu)只需針對(duì)性地設(shè)計(jì)提示，就可以完成不同項(xiàng)目以及不同任務(wù)、傳感器配置的落地。

而為了實(shí)現(xiàn)擴(kuò)展性更高、更貼近人類駕駛的自動(dòng)駕駛應(yīng)用，Nullmax通過人類反饋強(qiáng)化學(xué)習(xí)，來更好地學(xué)習(xí)人類駕駛行為，達(dá)成更強(qiáng)的泛化能力。現(xiàn)階段，城市NOA功能主要使用的是基于規(guī)則的算法，體驗(yàn)上存在一些不足，因此可以通過大規(guī)模閉環(huán)地學(xué)習(xí)人類駕駛行為，打造基于學(xué)習(xí)的規(guī)劃控制，進(jìn)而實(shí)現(xiàn)更高級(jí)的自動(dòng)駕駛。

Nullmax相信大模型的創(chuàng)新與應(yīng)用，將會(huì)加速自動(dòng)駕駛的發(fā)展，為無人駕駛的最終到來提供關(guān)鍵的技術(shù)支撐。打造以大模型為基礎(chǔ)的下一代的自動(dòng)駕駛形態(tài)，將能實(shí)現(xiàn)更加出色的出行體驗(yàn)，以及更加高效的開發(fā)和落地。

審核編輯：劉清