3月23日-24日,2024全球開發者先鋒大會(GDC)在上海舉行。由巖山科技旗下巖芯數智主辦的大會同期活動“大模型技術創新與應用探索講壇”順利召開,來自政、企、學各界的專家與領軍人物齊聚一堂,共話大模型發展。
開場環節,上海市人工智能行業協會副秘書長徐琦進行了講話,指出大模型在自然語言處理、圖像識別、無人駕駛、醫療診斷等領域展現出巨大潛力。巖芯數智董事長陳代千為活動進行了致辭,“期望借此加深行業內合作與碰撞,激發更多的創新思維和靈感火花,推動人工智能大模型行業邁向新的高度,構建開創安全高效的多模態人工智能新生態。”
圍繞如何更好地開發和利用大模型,切實推動大模型的創新應用,講壇嘉賓紛紛介紹了各自領域的研發和實踐。其中,針對“大模型的規模化應用與挑戰”,Nullmax首席科學家成二康博士分享了在自動駕駛大規模落地方面的經驗,并介紹了基于大模型打造下一代自動駕駛形態的技術思考,通過生成式、提示學習以及人類反饋強化學習,實現體驗更佳、開發效率更高的大規模自動駕駛。
基于大模型打造下一代自動駕駛
大模型在眾多領域表現出了非凡的應用價值,自動駕駛作為AI應用的集大成者,也是最適合開展大模型創新應用的領域之一。現場,成二康博士分享了Nullmax基于大模型打造下一代自動駕駛形態的思考。
在Nullmax看來,構建以大模型為基礎的下一代自動駕駛形態,不僅可以更好地理解物理世界和人類駕駛行為,實現更高級的自動駕駛。同時,在面對不同客戶的需求時,也能夠更高效地完成方案的開發,顯著降低整體的開發成本。
為此,Nullmax通過三方面的技術布局,打造以大模型為基礎的下一代自動駕駛技術形態。一是構建強大的世界模型,更好、更真實地生成豐富的自動駕駛數據;二是將基礎模型與提示學習相結合,實現平臺化的交付;三是通過人類反饋強化學習,大規模地閉環學習人類駕駛行為,提升自動駕駛的智能水平。
由于自動駕駛模型的訓練,尤其是端到端自動駕駛模型的訓練,依賴于大量的數據。而數據的采集、標注,需要大量的時間和成本,并且部分數據難以獲取。因此,Nullmax正在構建一個強大的世界模型,既可以生成未來時刻的視頻,也能理解人類的駕駛行為,通過這種生成式的方式,來高效獲得自動駕駛需要的海量感知、規控數據。
在這一基礎上,Nullmax同樣在打造一個能夠理解靜態場景、動態場景以及駕駛行為的基礎模型,并且結合提示學習,實現同一基礎模型衍生不同自動駕駛產品的技術構想,提升落地效率。當面對不同的需求時,這套技術架構只需針對性地設計提示,就可以完成不同項目以及不同任務、傳感器配置的落地。
而為了實現擴展性更高、更貼近人類駕駛的自動駕駛應用,Nullmax通過人類反饋強化學習,來更好地學習人類駕駛行為,達成更強的泛化能力。現階段,城市NOA功能主要使用的是基于規則的算法,體驗上存在一些不足,因此可以通過大規模閉環地學習人類駕駛行為,打造基于學習的規劃控制,進而實現更高級的自動駕駛。
Nullmax相信大模型的創新與應用,將會加速自動駕駛的發展,為無人駕駛的最終到來提供關鍵的技術支撐。打造以大模型為基礎的下一代的自動駕駛形態,將能實現更加出色的出行體驗,以及更加高效的開發和落地。
審核編輯:劉清
-
圖像識別
+關注
關注
9文章
520瀏覽量
38273 -
人工智能
+關注
關注
1791文章
47279瀏覽量
238511 -
自動駕駛
+關注
關注
784文章
13812瀏覽量
166461 -
大模型
+關注
關注
2文章
2451瀏覽量
2714
原文標題:分享新一代自動駕駛形態思考,Nullmax出席全球開發者先鋒大會同期活動
文章出處:【微信號:Nullmax,微信公眾號:Nullmax紐勱】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論