3月23日-24日，2024全球開發(fā)者先鋒大會（GDC）在上海舉行。由巖山科技旗下巖芯數(shù)智主辦的大會同期活動“大模型技術(shù)創(chuàng)新與應(yīng)用探索講壇”順利召開，來自政、企、學各界的專家與領(lǐng)軍人物齊聚一堂，共話大模型發(fā)展。

開場環(huán)節(jié)，上海市人工智能行業(yè)協(xié)會副秘書長徐琦進行了講話，指出大模型在自然語言處理、圖像識別、無人駕駛、醫(yī)療診斷等領(lǐng)域展現(xiàn)出巨大潛力。巖芯數(shù)智董事長陳代千為活動進行了致辭，“期望借此加深行業(yè)內(nèi)合作與碰撞，激發(fā)更多的創(chuàng)新思維和靈感火花，推動人工智能大模型行業(yè)邁向新的高度，構(gòu)建開創(chuàng)安全高效的多模態(tài)人工智能新生態(tài)。”

圍繞如何更好地開發(fā)和利用大模型，切實推動大模型的創(chuàng)新應(yīng)用，講壇嘉賓紛紛介紹了各自領(lǐng)域的研發(fā)和實踐。其中，針對“大模型的規(guī)模化應(yīng)用與挑戰(zhàn)”，Nullmax首席科學家成二康博士分享了在自動駕駛大規(guī)模落地方面的經(jīng)驗，并介紹了基于大模型打造下一代自動駕駛形態(tài)的技術(shù)思考，通過生成式、提示學習以及人類反饋強化學習，實現(xiàn)體驗更佳、開發(fā)效率更高的大規(guī)模自動駕駛。

基于大模型打造下一代自動駕駛

大模型在眾多領(lǐng)域表現(xiàn)出了非凡的應(yīng)用價值，自動駕駛作為AI應(yīng)用的集大成者，也是最適合開展大模型創(chuàng)新應(yīng)用的領(lǐng)域之一。現(xiàn)場，成二康博士分享了Nullmax基于大模型打造下一代自動駕駛形態(tài)的思考。

在Nullmax看來，構(gòu)建以大模型為基礎(chǔ)的下一代自動駕駛形態(tài)，不僅可以更好地理解物理世界和人類駕駛行為，實現(xiàn)更高級的自動駕駛。同時，在面對不同客戶的需求時，也能夠更高效地完成方案的開發(fā)，顯著降低整體的開發(fā)成本。

為此，Nullmax通過三方面的技術(shù)布局，打造以大模型為基礎(chǔ)的下一代自動駕駛技術(shù)形態(tài)。一是構(gòu)建強大的世界模型，更好、更真實地生成豐富的自動駕駛數(shù)據(jù)；二是將基礎(chǔ)模型與提示學習相結(jié)合，實現(xiàn)平臺化的交付；三是通過人類反饋強化學習，大規(guī)模地閉環(huán)學習人類駕駛行為，提升自動駕駛的智能水平。

由于自動駕駛模型的訓(xùn)練，尤其是端到端自動駕駛模型的訓(xùn)練，依賴于大量的數(shù)據(jù)。而數(shù)據(jù)的采集、標注，需要大量的時間和成本，并且部分數(shù)據(jù)難以獲取。因此，Nullmax正在構(gòu)建一個強大的世界模型，既可以生成未來時刻的視頻，也能理解人類的駕駛行為，通過這種生成式的方式，來高效獲得自動駕駛需要的海量感知、規(guī)控數(shù)據(jù)。

在這一基礎(chǔ)上，Nullmax同樣在打造一個能夠理解靜態(tài)場景、動態(tài)場景以及駕駛行為的基礎(chǔ)模型，并且結(jié)合提示學習，實現(xiàn)同一基礎(chǔ)模型衍生不同自動駕駛產(chǎn)品的技術(shù)構(gòu)想，提升落地效率。當面對不同的需求時，這套技術(shù)架構(gòu)只需針對性地設(shè)計提示，就可以完成不同項目以及不同任務(wù)、傳感器配置的落地。

而為了實現(xiàn)擴展性更高、更貼近人類駕駛的自動駕駛應(yīng)用，Nullmax通過人類反饋強化學習，來更好地學習人類駕駛行為，達成更強的泛化能力。現(xiàn)階段，城市NOA功能主要使用的是基于規(guī)則的算法，體驗上存在一些不足，因此可以通過大規(guī)模閉環(huán)地學習人類駕駛行為，打造基于學習的規(guī)劃控制，進而實現(xiàn)更高級的自動駕駛。

Nullmax相信大模型的創(chuàng)新與應(yīng)用，將會加速自動駕駛的發(fā)展，為無人駕駛的最終到來提供關(guān)鍵的技術(shù)支撐。打造以大模型為基礎(chǔ)的下一代的自動駕駛形態(tài)，將能實現(xiàn)更加出色的出行體驗，以及更加高效的開發(fā)和落地。

審核編輯：劉清