太平洋科技 出行

大模型正重新定義智能汽車的體驗。

如果說上半年的北京車展上，還只是一部分頭部車企圍繞端到端與大模型領(lǐng)域率先展開探索，那到了前不久的廣州車展，包括外資與合資車企在內(nèi)，幾乎所有廠商都在擁抱端到端與大模型的技術(shù)路線。

而大模型也本該是AI公司的主戰(zhàn)場。

11月27日，具有深厚AI背景的汽車科技公司商湯絕影舉辦了2024「絕影實力AI DAY」。商湯絕影展示了「駕-艙-云」三位一體的通用人工智能（AGI）產(chǎn)品體系與戰(zhàn)略布局，發(fā)布了一系列基于AI大模型的全新產(chǎn)品：

多模態(tài)座艙大模型結(jié)合記憶框架，使汽車不僅是智能工具，更賦予其「有趣的靈魂」；

而絕影在智駕領(lǐng)域多年的探索，也形成了一系列工程化的量產(chǎn)方案；

尤為值得關(guān)注的是，這次發(fā)布的世界模型「開悟」。

目前，各大頭部主機廠和Tier 1都在探索和研發(fā)世界模型，但還并沒有特別成熟的產(chǎn)品問世。世界模型通過生成高質(zhì)量仿真數(shù)據(jù)，推動端到端智能駕駛的發(fā)展。

「開悟」可以說是第一個產(chǎn)品化的，并且將向汽車行業(yè)開放的世界模型。

商湯絕影CEO、商湯科技聯(lián)合創(chuàng)始人、首席科學家王曉剛表示，基于世界模型，絕影打造出了真實數(shù)據(jù)和仿真數(shù)據(jù)的「雙輪驅(qū)動」閉環(huán)，構(gòu)建了車云一體的新范式。

讓座艙擁有「有趣的靈魂」

在智能座艙領(lǐng)域，商湯絕影一直是量產(chǎn)的領(lǐng)跑者。

據(jù)第三方數(shù)據(jù)，絕影座艙視覺AI軟件市場份額連續(xù)5年位列行業(yè)第一，市面上你能看到的絕大部分智能車大概率都搭載了商湯絕影的座艙技術(shù)，比如蔚來、樂道、極氪、智己、小米等等。

座艙大模型從單模態(tài)走向多模態(tài)也是必然趨勢。而在這次發(fā)布會上，絕影拋出了一個有趣的產(chǎn)品化新思路：汽車是否可以擁有「靈魂」，并最終融入用戶家庭，成為一位「新成員」。

以往的車機交互，主要是工具導向，為用戶提供基礎(chǔ)的信息查詢和問題解答服務(wù)；但在智能化時代，它應(yīng)該能學習、進化，提供更主動，更懂用戶的服務(wù)。

沿著這種思路，商湯絕影打造了「A New Member For U」(你的家庭新成員)，讓智能汽車能夠察言觀色，時刻準備著主動提供專屬服務(wù)，就像車主身邊的家庭新成員。

例如，在旅途中后排孩子睡著了，智能座艙會主動調(diào)高空調(diào)溫度、降低音樂音量，同時把底盤和駕駛模式調(diào)整為舒適模式，給小朋友一個舒適安心的休憩環(huán)境。

更重要的是，整個過程不需要用戶挨個下指令，而是它觀察、思考和推理之后提供主動的服務(wù)。

原生流式多模態(tài)大模型；

類人記憶框架；

Always-on持續(xù)運行框架；

端到端智駕量產(chǎn)大潮

繼無圖城市NOA之后，端到端智駕已經(jīng)成為智駕領(lǐng)域確定性的技術(shù)趨勢，也是當前車企在智駕傳播上的熱點。

作為AI領(lǐng)域的龍頭公司，商湯絕影也是當仁不讓。

絕影AI Day全面展示其多階的量產(chǎn)方案，包括基于地平線J6E/J6M、英偉達Orin/Thor等不同算力平臺打造的基礎(chǔ)智駕方案、全場景高階智駕、端到端智駕等絕影量產(chǎn)智駕產(chǎn)品體系，并正式發(fā)布基于UniAD打造的絕影量產(chǎn)端到端智駕方案AD Ultra。

基于地平線J6E和J6M兩個平臺，商湯絕影已經(jīng)打造了AD Pro和AD Max兩個量產(chǎn)智駕方案，其中AD Max能夠?qū)崿F(xiàn)城區(qū)無圖NOP。J6平臺的智駕方案，預計明年2季度就會量產(chǎn)交付。

王曉剛介紹，絕影的UniAD純視覺端到端方案，無圖、無激光雷達，僅需1個毫米波雷達和11個攝像頭，跑在200T算力平臺上，就能夠?qū)崿F(xiàn)一段式端到端智駕，實現(xiàn)「類人」駕駛體驗。

早在2022年，商湯及聯(lián)合實驗室提出行業(yè)首個感知決策一體化的自動駕駛通用模型UniAD，并榮獲CVPR 2023最佳論文。

UniAD將感知、決策、規(guī)劃等模塊都整合到一個全棧Transformer端到端模型，實現(xiàn)感知決策一體化的端到端智能駕駛。2024年北京車展，商湯絕影也展出了這一方案的階段性成果。

據(jù)HiEV了解，目前該方案已經(jīng)在上海城區(qū)demo運行。

基于前述的高階智駕方案，商湯絕影已經(jīng)與大卓智能、東風汽車等達成戰(zhàn)略合作，推進量產(chǎn)交付。

憑借在大模型技術(shù)上的積累，商湯絕影正在向智駕第一梯隊發(fā)起沖擊。但如果只是拿出又一個端到端方案，可能無法滿足市場的期待。所以，面對端到端智駕長期持續(xù)的技術(shù)提升，商湯絕影還祭出了另一項絕招——世界模型。

本次發(fā)布會上，商湯絕影亮相的最為重磅的產(chǎn)品，是「開悟」世界模型。

如果說，座艙和智駕因為用戶感知最明顯，很多車企希望將其掌握在自己手中，那世界模型，就是商湯絕影給車企發(fā)出的最無法拒絕的邀請。

端到端大模型方案，能夠直接從原始傳感器數(shù)據(jù)中學習駕駛策略，減少了對傳統(tǒng)模塊化系統(tǒng)的依賴。但這種方案對高質(zhì)量數(shù)據(jù)的需求極高，而且數(shù)據(jù)需要隨著模型的更新，不斷訓練迭代，其中的技術(shù)和成本要求都非常高。

受限于量產(chǎn)規(guī)模、算力資源，目前大多數(shù)車企和智駕公司都面臨高質(zhì)量駕駛數(shù)據(jù)的獲取難度大、效率低、成本高的問題。

因此，王曉剛表示：「智駕高端局的競爭不止是車端模型的比拼，端到端的決戰(zhàn)，戰(zhàn)場在云端�！�

商湯絕影的答案，是給行業(yè)提供「開悟」世界模型。