毫末智行發(fā)布業(yè)內(nèi)首個自動駕駛生成式大模型DriveGPT雪湖·海若，推進“重感知輕地圖”商業(yè)化落地

據(jù)連線出行獲悉，4月11日，中國唯一聚焦自動駕駛的AI技術盛宴——第八屆HAOMO AI DAY來襲。本屆HAOMO AI DAY以“HAOMO SPEED，AI SPEED”為主題，發(fā)布業(yè)內(nèi)首個自動駕駛生成式大模型DriveGPT，中文名“雪湖·海若”，將重塑汽車智能化技術路線；生態(tài)方面，毫末官宣取得3個主機廠定點合同，商業(yè)化迎來躍升一步；同時毫末推出的中國首個重感知、不依賴高精地圖的城市NOH即將量產(chǎn)上車，最先落地北京、上海、保定等城市，穩(wěn)居中國量產(chǎn)自動駕駛第一名……

（毫末智行董事長張凱）

毫末發(fā)布的一系列新技術、新產(chǎn)品、新生態(tài)……展示了毫末持續(xù)向上、向新的蓬勃態(tài)勢。成立三年半時間，毫末始終保持對AI技術的熱忱，用“毫末速度”在國內(nèi)引領自動駕駛大模型、大數(shù)據(jù)、大算力發(fā)展方向，沖刺自動駕駛3.0時代。

（毫末智行CEO顧維灝發(fā)布自動駕駛生成式大模型DriveGPT，中文名“雪湖·海若”）

HAOMO AI DAY現(xiàn)場，毫末打造的自動駕駛生成式大模型DriveGPT雪湖·海若重磅發(fā)布，成為大模型技術落地自動駕駛新范式。它通過引入駕駛數(shù)據(jù)建立RLHF（人類反饋強化學習）技術，對自動駕駛認知決策模型進行持續(xù)優(yōu)化，現(xiàn)階段主要用于解決自動駕駛的認知決策問題，終極目標是實現(xiàn)端到端自動駕駛。毫末DriveGPT雪湖·海若已開啟對限量首批生態(tài)伙伴的開放合作，北京交通大學計算機與信息技術學院、高通、火山引擎、華為云、京東科技、四維圖新、魏牌新能源、英特爾等高校與企業(yè)加入。

（毫末智行董事長張凱、CEO顧維灝、COO侯軍、CIO甄龍豹在HAOMO AI DAY現(xiàn)場）

產(chǎn)品方面，毫末持續(xù)引領中國量產(chǎn)自動駕駛第一名。中國首款可大規(guī)模量產(chǎn)落地、重感知城市NOH，將首批落地北京、保定、上海等城市，并開啟泛化測試，到2024年有序落地100城。首款搭載HPilot3.0的新摩卡DHT-PHEV即將重磅上市，這也是毫末DriveGPT雪湖·海若的首發(fā)落地車型，全面確保毫末城市NOH的行業(yè)領先性。

生態(tài)層面，毫末乘用車6P開放合作取得重大突破，已與3家主機廠簽署定點合同，相關項目正在交付中。這是毫末商業(yè)化的重要一躍，全面保障了毫末高速發(fā)展態(tài)勢。

毫末智行董事長張凱判斷：“2023年智駕產(chǎn)品進入全線爆發(fā)期，大模型開啟在車端的落地應用，車主的使用頻率和滿意度成為產(chǎn)品競爭力的重要衡量標準。毫末不斷進步的數(shù)據(jù)驅(qū)動的六大閉環(huán)能力將進一步加速毫末進入自動駕駛3.0時代的步伐并形成相應的護城河?！?/p>

毫末四大戰(zhàn)役全面突圍，拿下三大主機廠定點合同實現(xiàn)商業(yè)化重要一躍

“2023年將是智能駕駛沖刺之年、大考之年。”活動現(xiàn)場，張凱以《HAOMO SPEED，AI SPEED》為題，分享了對于2023年自動駕駛發(fā)展宏觀趨勢的判斷，以及毫末四大戰(zhàn)役及商業(yè)化發(fā)展的最新進展。

張凱認為，智駕產(chǎn)品正在進入快速增長的全線爆發(fā)期，2023年是非常關鍵的一年。首先，城市導航輔助駕駛產(chǎn)品在2023年將圍繞量產(chǎn)上車發(fā)力，主要玩家的城市導航輔助駕駛產(chǎn)品進入到真實用戶覆蓋和多城市落地的比拼。其次，行泊一體和末端物流自動配送產(chǎn)業(yè)商業(yè)化將成為自動駕駛公司深耕的重點。在乘用車領域，搭載行泊一體功能的智駕產(chǎn)品將迎來前裝量產(chǎn)潮；在末端物流自動配送領域，末端物流自動配送車在商超、快遞等場景迎來爆發(fā)，2023年將在這些場景實現(xiàn)可持續(xù)商業(yè)化閉環(huán)。

（張凱判斷2023年是自動駕駛沖刺之年、大考之年）

在行業(yè)全面發(fā)力、更多產(chǎn)品落地的背景下，張凱介紹了毫末2023年四大戰(zhàn)役的最新成果。

（毫末持續(xù)引領中國量產(chǎn)自動駕駛第一名）

首先是“智能駕駛裝機量王者之戰(zhàn)”，首款搭載HPilot3.0的新摩卡DHT-PHEV即將重磅上市，第二款搭載毫末HPilot3.0的車型魏牌藍山也將在今年發(fā)布。毫末HPilot整體已搭載近20款車型。用戶輔助駕駛行駛里程突破4000萬公里，HPilot2.0輔助駕駛?cè)站旭偫锍淌褂寐蔬_到了12.6%。海外布局方面，搭載毫末HPilot的車輛已運往歐盟、以色列等地區(qū)和國家，陸續(xù)交付到用戶手中，接下來將在中東、南非、澳大利亞等市場陸續(xù)投放；同時，毫末HPilot即將量產(chǎn)墨西哥版本及俄羅斯版本。

3月，高工智能汽車研究院在每個年度基于前裝量產(chǎn)數(shù)據(jù)庫及定點車型庫數(shù)據(jù)進行綜合評估，通過對毫末前裝近20款車輛等數(shù)據(jù)研究，為毫末頒發(fā)年度高階智能駕駛系統(tǒng)量產(chǎn)份額領軍獎。第三方數(shù)據(jù)佐證毫末是中國量產(chǎn)自動駕駛絕對領軍者。毫末持續(xù)引領中國自動駕駛第一名。

（DriveGPT雪湖·海若已完成基于4000萬公里駕駛數(shù)據(jù)的訓練）

其次是“MANA大模型巔峰之戰(zhàn)”，中國首個自動駕駛數(shù)據(jù)智能體系MANA架構已迎來全線升級。到2023年4月，MANA學習時長超56萬小時，相當于人類司機6.8萬年。毫末DriveGPT雪湖·海若，已經(jīng)完成基于4000萬公里駕駛數(shù)據(jù)的訓練，參數(shù)規(guī)模達1200億。

（毫末將以“安全為先、用戶為先、規(guī)模為先”的原則，加速贏得城市NOH百城大戰(zhàn)）

第三是“城市NOH百城大戰(zhàn)”，中國首款可大規(guī)模量產(chǎn)落地、重感知城市NOH，已在北京、保定、上海等城市開啟泛化測試，即將量產(chǎn)上車，到2024年有序落地100城。毫末會以“安全為先、用戶為先、規(guī)模為先”的原則，加速贏得城市NOH百城大戰(zhàn)。

（小魔駝已覆蓋九大場景，開啟多元化運營）

最后是“末端物流自動配送商業(yè)之戰(zhàn)”，毫末末端物流自動配送車小魔駝已在商超履約、智慧社區(qū)、校園配送、餐飲零售、機場巡邏、高校教育、快遞接駁、智慧園區(qū)、大氣環(huán)評等九大場景開啟運營，加速商業(yè)化閉環(huán)能力。2023年3月，小魔駝2.0獲北京亦莊無人配送車車輛編碼，開啟亦莊運營。毫末也成為《北京智能網(wǎng)聯(lián)汽車政策先行區(qū)無人配送測試規(guī)范》升級后，準許在北京市高級別自動駕駛示范區(qū)公開道路進行無人配送車測試的首個公司。

“技術領先是生存根本，毫末鼓勵所有技術研發(fā)同學投入到技術創(chuàng)新當中?！睆垊P在演講中再次強調(diào)了毫末對于技術研發(fā)投入的堅定決心。截至目前，毫末已獲得專利證書164件，國際頂級學術會議論文收錄6篇，最新2篇更是分別入選計算機視覺識別領域三大頂會之一的CVPR和全球首個智能車專業(yè)期刊IEEE TIV。毫末已將所有論文在GitHub開源，與業(yè)內(nèi)共享。

（毫末已與3家主機廠簽署定點合同，相關項目正在交付中）

現(xiàn)場，張凱還向外界公布了毫末6P開放合作的重要進展，目前已與3家主機廠簽署定點合同，相關項目正在交付中?！昂聊┦冀K認為，自動駕駛是一個共同進退、共享成果的前沿產(chǎn)業(yè)。只有健康的生態(tài)伙伴才能支持毫末高速發(fā)展。”張凱表示。

（MANA六大閉環(huán)構建領先數(shù)據(jù)驅(qū)動系統(tǒng)）

此外，毫末一直堅持場景化用戶體驗設計、人工智能技術、技術工程化能力均衡發(fā)展，不斷以數(shù)據(jù)驅(qū)動閉環(huán)的方式完善用戶體驗。張凱介紹，三個月時間，毫末在數(shù)據(jù)驅(qū)動六大閉環(huán)體系上實現(xiàn)多重進展：

用戶需求閉環(huán)方面，毫末對駕駛場景數(shù)據(jù)持續(xù)分析完善策略，并進行新功能體驗反饋；研發(fā)效能閉環(huán)方面，毫末將數(shù)據(jù)驅(qū)動理念深入到產(chǎn)品需求定義、感知與認知算法開發(fā)等產(chǎn)品開發(fā)流程，整體開發(fā)效率提升30%；數(shù)據(jù)積累閉環(huán)方面，毫末在車端部署診斷服務數(shù)據(jù)場景標簽覆蓋92%的駕駛場景。數(shù)據(jù)價值閉環(huán)方面，毫末大模型正在持續(xù)挖掘數(shù)據(jù)價值解決關鍵問題；產(chǎn)品自完善閉環(huán)方面，毫末實現(xiàn)售后問題處理速度較傳統(tǒng)方式的十倍效率提升，實現(xiàn)最快10分鐘定位售后問題。兩年時間有效挖掘產(chǎn)品提升點，問題閉環(huán)率達76%；業(yè)務工程化閉環(huán)方面，毫末進一步完善了從采集回流、標注訓練、系統(tǒng)標定、仿真驗證等環(huán)節(jié)到最終OTA釋放環(huán)節(jié)的產(chǎn)品研發(fā)全流程工程化閉環(huán)。

毫末DriveGPT雪湖·海若發(fā)布，將重塑汽車智能化技術路線

在AI自動駕駛領域，毫末是大模型研發(fā)和應用的先行者。現(xiàn)場，毫末智行CEO顧維灝發(fā)布自動駕駛生成式大模型DriveGPT，中文名雪湖·海若。

毫末DriveGPT雪湖·海若通過引入駕駛數(shù)據(jù)建立RLHF（人類反饋強化學習）技術，對自動駕駛認知決策模型進行持續(xù)優(yōu)化。它的最終目標是實現(xiàn)端到端自動駕駛，現(xiàn)階段主要用于解決自動駕駛的認知決策問題，后續(xù)持續(xù)會將毫末多個大模型的能力整合到DriveGPT。目前，毫末DriveGPT雪湖·海若實現(xiàn)了模型架構與參數(shù)規(guī)模的升級，參數(shù)規(guī)模達到1200億，預訓練階段引入4000萬公里量產(chǎn)車駕駛數(shù)據(jù)，RLHF階段引入 5萬段人工精選的困難場景接管Clips。

DriveGPT雪湖·海若的底層模型采用GPT（Generative Pre-trained Transformer）生成式預訓練大模型，與ChatGPT使用自然語言進行輸入與輸出不同，DriveGPT輸入是感知融合后的文本序列，輸出是自動駕駛場景文本序列，即將自動駕駛場景Token化，形成“Drive Language”，最終完成自車的決策規(guī)控、障礙物預測以及決策邏輯鏈的輸出等任務。

（DriveGPT雪湖·海若）

DriveGPT雪湖·海若的實現(xiàn)過程是，首先在預訓練階段通過引入量產(chǎn)駕駛數(shù)據(jù)，訓練初始模型，再通過引入駕駛接管Clips數(shù)據(jù)完成反饋模型（Reward Model）的訓練，然后再通過強化學習的方式，使用反饋模型去不斷優(yōu)化迭代初始模型，形成對自動駕駛認知決策模型的持續(xù)優(yōu)化。同時，DriveGPT雪湖·海若還會根據(jù)輸入端的提示語以及毫末CSS自動駕駛場景庫的決策樣本去訓練模型，讓模型學習推理關系，從而將完整駕駛策略拆分為自動駕駛場景的動態(tài)識別過程，完成可理解、可解釋的推理邏輯鏈生成。

（DriveGPT雪湖·海若發(fā)布，首發(fā)落地車型新摩卡DHT-PHEV）

現(xiàn)場，毫末宣布DriveGPT雪湖·海若首發(fā)車型是新摩卡DHT-PHEV，即將量產(chǎn)上市。顧維灝提到，DriveGPT雪湖·海若可以逐步應用到城市NOH、捷徑推薦、智能陪練以及脫困場景中。有了DriveGPT雪湖·海若的加持，車輛行駛會更安全；動作更人性、更絲滑，并有合理的邏輯告訴駕駛者，車輛為何選擇這樣的決策動作。對于普通用戶來說，車輛越來越像老司機，用戶對智能產(chǎn)品的信任感會更強，理解到車輛的行為都是可預期、可理解的。

（DriveGPT雪湖·海若將重塑汽車智能化技術路線）

目前，毫末DriveGPT雪湖·海若已正式對外開放，開啟對限量首批客戶的合作，北京交通大學計算機與信息技術學院、高通、火山引擎、華為云、京東科技、四維圖新、魏牌新能源、英特爾等已經(jīng)加入。毫末DriveGPT的對外開放及服務，將促進自動駕駛的從業(yè)者和研究機構快速構建基礎能力。

（毫末DriveGPT雪湖·海若面向行業(yè)開放）

毫末DriveGPT雪湖·海若將攜手生態(tài)伙伴率先探索四大應用能力，包括智能駕駛、駕駛場景識別、駕駛行為驗證、困難場景脫困。當前，毫末在使用數(shù)據(jù)過程中，逐步建立起一套基于4D Clips駕駛場景識別方案，具備極高性價比。在行業(yè)上，給出正確的標注結果，一張圖片需要約5元；如果使用DriveGPT雪湖·海若的場景識別服務，一張圖片的價格將下降到0.5元。單幀圖片整體標注成本僅相當于行業(yè)的1/10。接下來，毫末會將圖像幀及4D Clips場景識別服務逐步向行業(yè)開放使用，這將大幅降低行業(yè)使用數(shù)據(jù)的成本，提高數(shù)據(jù)質(zhì)量，從而加速自動駕駛技術的快速發(fā)展。

（DriveGPT雪湖·海若的場景識別能力對外開放）

顧維灝介紹，毫末在2023年1月發(fā)布的中國自動駕駛行業(yè)最大的智算中心MANA OASIS（雪湖· 綠洲）此次從算力優(yōu)化等層面升級了三大能力，進一步支持DriveGPT雪湖·海若的算力。首先，毫末與火山引擎全新搭建了“全套大模型訓練保障框架”，實現(xiàn)了異常任務分鐘級捕獲和恢復能力，可以保證千卡任務連續(xù)訓練數(shù)個月沒有任何非正常中斷,有效保證了大模型訓練穩(wěn)定性；其次，毫末研發(fā)出以真實數(shù)據(jù)回傳為核心的增量學習技術，并將其推廣到了大模型訓練，構建了一個大模型持續(xù)學習系統(tǒng)，自主研發(fā)任務級彈性伸縮調(diào)度器，分鐘級調(diào)度資源，集群計算資源利用率達到95%；最后，MANA OASIS通過提升數(shù)據(jù)吞吐量來降本增效，滿足Transformer大模型訓練效率，通過引入火山引擎提供的Lego算子庫實現(xiàn)算子融合，端到端吞吐提升84%。

MANA架構全線升級開放賦能，視覺感知能力比肩特斯拉

毫末打造的中國首個自動駕駛數(shù)據(jù)智能體系MANA，在經(jīng)過一年多的應用迭代后，本次AI DAY也迎來了全面的升級，正式開放賦能。顧維灝介紹，MANA計算基礎服務針對大模型訓練在參數(shù)規(guī)模、穩(wěn)定性和效率方面做了專項優(yōu)化，并集成到OASIS中；其次，MANA感知和認知相關大模型能力統(tǒng)一整合到DriveGPT雪湖·海若中；第三，增加了使用NeRF技術的數(shù)據(jù)合成服務，降低Corner?Case數(shù)據(jù)的獲取成本；同時針對多種芯片和多種車型的快速交付難題優(yōu)化了異構部署工具和車型適配工具。

（中國首個自動駕駛數(shù)據(jù)智能體系MANA全面升級，開放賦能）

（MANA視覺感知能力進展）

此外，MANA的視覺感知能力持續(xù)提升，一方面可同時學習三維空間結構和圖片紋理，并將純視覺測距精度超過了超聲波雷達，BEV方案也擁有了更強的通用性和適配性；另一方面可實現(xiàn)單趟和多趟純視覺NeRF三維重建，道路場景更逼真，肉眼幾乎看不出差異。通過NeRF進行場景重建后，可以編輯合成真實環(huán)境難以收集到的Corner?Case。在原有的全局視角修改、添加光照/天氣效果的基礎上，新增合成虛擬動態(tài)物體的能力，可以在原有設定的運動軌跡上，合成各種Hard Case，模擬城市復雜交通環(huán)境，用更低成本測試提升城市NOH能力邊界，更好提升應對城市復雜交通環(huán)境。

（MANA視覺感知能力進展）值得一提的是，面對目前行業(yè)里最難的視覺任務之一——單目視覺測量，繼特斯拉后，毫末也在中國率先開始驗證能否使用魚眼相機代替超聲波雷達進行測距，以滿足泊車要求。毫末把視覺BEV感知框架引入到了車端魚眼相機，做到了在15米范圍內(nèi)達到30cm的測量精度，2米內(nèi)精度高于10cm的視覺精度效果。泊車場景使用純視覺測距來取代超聲波雷達，將進一步降低整體智駕成本。

（毫末純視覺測距精度可以使用魚眼相機取代超聲波雷達）

顧維灝表示，“我們一直提到，基于真實用戶場景的反饋數(shù)據(jù)能夠讓我們更好的優(yōu)化產(chǎn)品，讓產(chǎn)品進步的更快。所有技術都要轉(zhuǎn)化為對人有用的產(chǎn)品才最有價值。現(xiàn)在，毫末的產(chǎn)品正在為用戶提供著更多價值?！?/p>

自動駕駛領域產(chǎn)學研重磅嘉賓助陣，毫末生態(tài)伙伴已達近百家

本屆AI DAY再度齊聚自動駕駛領域超豪華嘉賓陣容。中國汽車芯片聯(lián)盟聯(lián)席理事長、中國電動汽車百人會副理事長董揚，同濟大學教授、汽車安全技術研究所所長朱西產(chǎn)，清華大學車輛與運載學院教授曹東璞等業(yè)內(nèi)專家、學者，分享了自動駕駛產(chǎn)業(yè)和技術的最新進展；魏牌CTO張波濤，坦克商品總監(jiān)谷玉坤、華為云人工智能領域首席科學家、國際歐亞科學院院士、IEEE/CAAI Fellow田奇、高通公司產(chǎn)品市場高級總監(jiān)艾和志、NVIDIA 中國區(qū)工程和解決方案高級總監(jiān)賴俊杰、中科院雄安創(chuàng)新研究院認知智能實驗室副主任、雄安新區(qū)數(shù)字交通實驗室副主任黃武陵等生態(tài)伙伴分享了行業(yè)最新洞察，及與毫末的合作情況。此外，本季度毫末又迎來了映馳科技、中國自動化學會、第二次青藏高原綜合科學考察研究等更多合作伙伴，毫末生態(tài)伙伴已達近百家。

（毫末生態(tài)伙伴出席HAOMO AI DAY）

董揚表示，“中國汽車產(chǎn)業(yè)經(jīng)歷大變遷，從引進時代到創(chuàng)新時代，從電動化到智能化。智能網(wǎng)聯(lián)汽車的技術發(fā)展很快，最近這半年，我特別的感受就是“L3呼之欲出”，需要大家關注。希望以毫末智行為代表的民營創(chuàng)新企業(yè)能夠在中國品牌汽車創(chuàng)新發(fā)展中間承擔主力和先鋒?！?/p>

朱西產(chǎn)表示，“自動駕駛的安全運營，離不開政策的完善和引導，更離不開相關企業(yè)在技術研發(fā)過程中的謹慎探索和落地過程中的小心實踐。毫末智行將安全視為系統(tǒng)工程、底層邏輯，無論是態(tài)度和實踐成果，都值得與全行業(yè)進行分享?！?/p>

曹東璞表示，“希望未來能夠與毫末一起，圍繞技術研發(fā)、行業(yè)標準制定、人才培養(yǎng)等展開更多合作，共同為中國自動駕駛的發(fā)展貢獻力量。”

顧維灝在演講結尾提到，毫末成立到現(xiàn)在接近三年半時間。這三年多時間，很多事物都發(fā)生了變化，但是毫末對技術的堅定投入始終未變。毫末人始終熱愛技術，枕戈待旦，全力沖刺。再難，都不會放棄。所愛隔山海，山海皆可平。技術必將改變世界！”

演講中，顧維灝在演講中揭秘了雪湖·海若名字的來源：“‘海若’出自《莊子·秋水》，里面有兩個神話人物河伯和北海若。河伯請教北海若，何謂大小之分，北海若教導，不因天地而覺大，不因毫末而覺小。毫末雪湖·海若，寓意智慧包容、海納百川，為行業(yè)發(fā)展貢獻力量?！?/p>

張凱表示，“春暖花開，AI照亮未來。毫末將繼續(xù)篤定前行。”

（本文頭圖為DriveGPT雪湖·海若。）