絕影實力AI DAY:多款創新技術產品發布,領航AI汽車新征程!
供稿 / 2024-11-27 17:19587511月27日,2024「絕影實力AI DAY」成功舉辦,商湯絕影全面展示了「駕-艙-云」三位一體的通用人工智能(AGI)產品體系與戰略布局,發布智能座艙交互革新、端到端智能駕駛等前沿領域的創新成就,領航AI汽車新征程。
在本屆「絕影實力AI DAY」上,商湯絕影行業首發智能座艙大模型創新產品「A New Member For U」(你的家庭新成員),讓汽車擁有「有趣的靈魂」。面向智能駕駛,商湯絕影構建了「車云一體」的產品矩陣,發布涵蓋高速、城區以及泊車等全場景的高階智駕、端到端智駕等絕影量產智駕產品體系,同時全新升級行業標桿級別的「開悟」世界模型,以此打造堅實的數據基礎設施。
作為最專注汽車行業的AI公司,商湯絕影同時具備豐沛算力、原生汽車垂類大模型研發能力、高質量數據體系和豐富量產經驗等全棧實力,全力以赴推動大模型上車,打造領先的AI汽車創新技術和產品,給座艙以溫度,讓智駕更自由。
商湯絕影CEO、商湯科技聯合創始人、首席科學家王曉剛表示:「我們已經站在AGI時代的門口。作為加速智能汽車駛入AGI時代的戰略合作伙伴,商湯絕影將牢牢把握住新一輪智能汽車變革的時間窗口,與車企伙伴進行全方位深度合作,共享大算力與大模型,共建數據基礎設施,共同打造智能汽車大模型創新應用,才能攜手共贏,領航未來。」
商湯絕影CEO、商湯科技聯合創始人、首席科學家 王曉剛
A New Member For U,絕影讓智能汽車擁有「有趣的靈魂」
大模型上車伊始,它們主要扮演著工具的角色,為用戶提供基礎的對話、信息查詢和問題解答服務。隨著技術的不斷進步,具備邏輯思考和通用任務處理能力的AI Agent出現了,能夠根據用戶的指令,完成復雜的連續性任務,成為能干的助理。不過,這類車機都只是聽話和服從的「被動智能」。
在2024「絕影實力AI DAY」上,商湯絕影用領先的AI實力重新定義座艙,不只是賦予汽車以智能,更賦予智能以溫度。未來,它不再只是冰冷的工具或者機械式的助理,而是「A New Member For U」,成為會察言觀色、無時不在且與你心有靈犀的「家庭新成員」。
這位「家庭新成員」能夠感知和理解用戶需求,提供有溫度、有情感的主動關懷。可以暢想這么一個場景:在駕駛旅途中,「家庭新成員」注意到坐在后排的孩子睡著了,就會主動把空調溫度升高、音樂的聲量調低,底盤和駕駛模式都調整為舒適模式,給小朋友一個舒適安心的睡眠環境。
依托原生流式多模態大模型、車載類人記憶框架和持續運行框架等前沿AI大模型技術,商湯絕影正在引領座艙交互體驗的革新,讓智能汽車擁有「有趣的靈魂」。
New Member「新成員」能夠察言觀色,離不開商湯絕影強大的原生流式多模態大模型。在OpenCompass多模態評測榜單中,絕影多模態大模型的理解和推理能力排名第一,以此為基礎,「家庭新成員」能全面感知用戶的語音、表情、手勢、以及環境數據,并進行深度理解和推理思考,具備理解世界、理解人類的能力。
如果要讓汽車與用戶心有靈犀,它還必須有擁有「記憶」,因為記憶是人類認知的核心,也是情感聯結的基礎。為此,商湯絕影打造了國內首個「車載類人記憶框架」,讓系統實現類人的記憶能力。
商湯絕影的記憶框架與人類的記憶機制非常相似。它有臨時記憶,能記得一些瞬時信息,比如車里的物品、人的搭配、有沒有系安全帶等;也有長期記憶,就像是一個“檔案庫”,存儲用戶的基本信息、行為模式和偏好等,它可以自我迭代,能從用戶長期使用中總結規律并不斷優化。而通過場景記憶,車機能針對當前場景進行毫秒級的動態記憶檢索,提取關鍵信息,進行決策,主動服務。
合格的「家庭新成員」還要無時不在時刻準備為你服務,絕影打造了能夠持續推理的Always-on運行框架,將多模態感知到的信息與各種記憶相結合,依托端云協同架構,數據延遲控制在1毫秒以下,首包延時最快只需60毫秒,推理速度達40 Tokens/秒,對數據進行高效處理和反饋,時刻感知需求,主動為用戶服務。
在追求智能和情感化的同時,商湯絕影始終堅持將用戶隱私與安全放在首位,通過全方位的隱私保護與數據安全體系,做到“數據跟人走”、“隱私數據不出車”、“不該說的不說”,確保系統在安全合規的前提下提供極致體驗,為每一位用戶打造專屬的安全空間。
端到端量產在即,「開悟」全新升級,絕影構建「車云一體」智駕新范式
今年年初,城區無圖NOA是智能駕駛領域的核心話題。之后,端到端智駕技術為行業帶來了范式革新,逐漸取代模塊化的規則,成為智駕技術的進化方向。從北京車展開始,商湯絕影等多家公司陸續發布端到端智駕方案,智駕正在邁向端到端時代。
在本屆「絕影實力AI DAY」上,商湯絕影全面展示了基于J6E、J6M、Orin等不同算力平臺打造的全場景高階智駕、端到端智駕等絕影量產智駕產品體系。商湯絕影的智駕量產交付也在穩步推進,基于J6平臺的智駕方案預計2025年第二季度將量產交付,而量產端到端智駕方案則預計會在明年年底量產落地。
在推進量產的同時,行業也發現,研發范式從規則驅動轉變為數據驅動,端到端智駕模型對于高質量數據的需求呈指數級的增長。
然而,受限于高階智駕的量產規模、算力資源,目前大多數車企和智駕公司都面臨相同的問題,即高質量駕駛數據的獲取難度大、效率低、成本高。
商湯絕影探索出一條新的道路,通過實車采集和仿真生成「雙輪驅動」的數據閉環,構建量產智駕產品體系和世界模型深度融合的「車云一體」智駕新范式。
商湯絕影「車云一體」新范式
在2024「絕影實力AI DAY」上,王曉剛表示:「智駕高端局的競爭不止是車端模型的比拼,端到端的決戰,戰場在云端。」為此,商湯絕影全新升級并發布行業標桿級別的世界模型——「開悟」世界模型。
世界模型最基礎也是最核心的能力是生成高質量視頻數據,高質量數據的關鍵在于「真實」。基于多模態大模型打造的絕影世界模型,能夠理解真實世界的物理規則、交通規則,生成的視頻數據也更加逼真。現場展示的「開悟」生成視頻案例中,晴朗天氣下,汽車、路燈都是有影子的,右轉車輛會主動讓行優先級更高的直行車輛。
在真實的基礎上,「開悟」生成的場景視頻,時間最長為150秒、分辨率可達1080P、視角可以實現11V,是行業首個同時完成上述指標的智駕世界模型。
基于行人車輛3D框和時空軌跡的信號輸入,「開悟」生成的11V時空一致視頻
根據公開數據,「開悟」生成效果的各項指標開源均達SOTA,優于包括GAIA-1、DriveDreamer在內的國內外主流世界模型。此外,從2023年開始,在全球知名的自動駕駛仿真模擬任務競賽Waymo Sim Agents的比拼中,「開悟」連續兩年獲得第一名,是當之無愧的行業標桿。
更重要的是,通過多模態大模型,「開悟」世界模型可以支持多樣化的自動駕駛場景及Corner case的可控生成。目前商湯絕影基于1024類場景,能夠泛化出更多的平行世界,打造了千萬級的生成場景庫,預計2025年對行業開放。
以絕影量產智駕方案和「開悟」世界模型為核心,實車采集的真實數據和云端生成的仿真數據在「車云一體」的新范式下進行閉環流轉,使得端到端智駕系統的訓練更加全面、高效,大幅縮短了研發周期,降低了成本,讓用戶能夠更快享受到智能駕駛帶來的便捷與安全。
攜手奇瑞大卓、東風汽車開展深度戰略合作,打造共生共創共享合作新模式
商湯絕影的技術和產品持續創新,商業化落地也全面開花,量產交付穩步推進。智駕方案已量產交付廣汽埃安、一汽紅旗等3家車企6款車型。第三方調研數據顯示,商湯絕影在座艙視覺AI軟件市場的份額連續五年蟬聯第一。此外座艙AI大模型產品已上車小米SU7、智己、LEVC L380等車型。
值得關注的是,商湯絕影面向海外市場升級了座艙視覺AI產品矩陣,助力極氪X的DMS系統斬獲ENCAP歷史最高分,并在「絕影實力AI DAY」首發ENCAP2026 OOP離位檢測、身材檢測功能。
如今,商湯絕影已與超30家國內外車企達成合作,覆蓋100余款車型,預計至2024年底,量產交付累計將突破350萬輛。
![[新聞稿]絕影實力AI+DAY:行業首發AI汽車創新產品「A+NEW+Member+For+U」,標桿級世界模型「開悟」3629.png](http://up.itheat.com/upload/article/2024/11/27-77a5b81bfc075044441d441e3e573d12.png)
商湯絕影已展現出在技術研發、產品創新和商業化落地等各個領域的全面實力,成長為智能汽車領域的頂級AI戰略合作伙伴。
如今,智能汽車站在潛力無限的新起點上,作為加速智能汽車駛入AGI時代的戰略合作伙伴,商湯絕影正全力推動最前沿的AI技術與智能汽車產業的深度融合。
單打獨斗難以在AGI時代脫穎而出,主機廠和AI公司必須以全新的方式進行深度戰略合作才有可能形成行業競爭力。目前,商湯絕影已和大卓智能、東風汽車等合作伙伴簽訂戰略合作協議,在高階智駕量產、端到端量產、AI云服務、AI大模型等領域開展全方位的深度合作,加速自動駕駛的落地與進化。
![[新聞稿]絕影實力AI+DAY:行業首發AI汽車創新產品「A+NEW+Member+For+U」,標桿級世界模型「開悟」3899.png](http://up.itheat.com/upload/article/2024/11/27-0a9e90f368a4c60bfd97801bc602958c.png)
共享強大算力集群與大模型能力、共建數據基礎施設、共創智能汽車AI應用生態,這一全新合作模式是通往AGI未來的必由之路,商湯絕影是邁向AGI之路的最佳同行者。
商湯絕影愿意和車企合作伙伴共享算力豐沛的商湯大裝置,行業領先的20,000 P算力將為合作伙伴提供強有力的基礎設施保障;同時,絕影將開放性能全面的基礎大模型能力,提升車企的AI實力。
在共享大算力和大模型的基礎上,雙方能夠加速研發體系的對齊,共同建設以高效率世界模型和全流程數據閉環為核心的數據基礎設施。未來,數據的數量、質量和利用率等都不再是問題和阻礙,在智能汽車與云端平臺之間流動的數據,將成為加速大模型上車的高效燃料。
在基礎設施、大模型能力和全棧數據閉環進行深度合作之后,雙方才能進一步挖掘出AGI在智能駕駛和智能座艙領域的潛力,共同創造全新的智慧出行體驗。
絕影實力AI DAY:多款創新技術產品發布,領航AI汽車新征程!














滬公網安備 31010702005758號
發表評論注冊|登錄