A New Member For U,商湯絕影以領先AI實力,讓汽車擁有「有趣的靈魂」
供稿 / 2024-11-27 17:515976站在AGI時代的門口,智能汽車產業迎來了前所未有的發展機遇。在這場技術驅動的變革中,商湯絕影以其深厚的AI技術積淀,正逐步釋放科技的力量,推動智能汽車行業的跨越式發展。
在2024「絕影實力AI DAY」上,商湯絕影用領先的AI實力重新定義座艙,首發AI汽車創新產品「A New Member For U」(你的家庭新成員),讓汽車擁有「有趣的靈魂」。
依托原生流式多模態大模型、車載類人記憶框架和持續運行框架等前沿AI汽車創新技術,商湯絕影打造的「家庭新成員」能夠察言觀色,無時不在,并且做到與你心有靈犀。
![[新聞稿]A+New+Member+For+U,商湯絕影以領先AI實力,讓汽車擁有「有趣的靈魂」374.png](http://up.itheat.com/upload/article/2024/11/27-4df445d5c471e04d35e05cb3f164d503.png)
「叛逆」進化,智能座艙成為「家庭新成員」
大模型上車伊始,它們主要扮演著工具的角色,為用戶提供基礎的信息查詢和問題解答服務。比如當用戶對車內的某項功能不熟悉或遇到故障時,可以簡單地詢問車機,它能夠快速地提供解決方案,幫助用戶解決特定問題。
隨著技術的不斷進步,具備邏輯思考和通用任務處理能力的AI Agent出現了,能夠根據用戶的指令,完成復雜的連續性任務,讓座艙成為一個有能力的助手。但它依舊局限于被動服務,算不上真正「知你懂你」。
商湯絕影致力于讓智能汽車向有情感、有溫度的超級智能體進化,讓汽車不再是冰冷的工具或者機械式的助手。這就需要讓智能座艙進行一次「叛逆」進化。
「叛逆」是指一種突破。AI汽車的智能座艙不再只是個聽話的工具,循規蹈矩的助手,而是能夠主動學習,自我進化。未來,它會將每一次交互轉化為寶貴的記憶,逐漸形成對用戶的深度理解。在知情允許之下,座艙能記住你的偏好,比如喜歡的溫度、常去的目的地以及更多個性化細節,并提供主動服務,它還會持續迭代、自我成長,真正擁有「有趣的靈魂」。
![[新聞稿]A+New+Member+For+U,商湯絕影以領先AI實力,讓汽車擁有「有趣的靈魂」826.png](http://up.itheat.com/upload/article/2024/11/27-28e7da85c6e57d557be98484b4e31c77.png)
為此,商湯絕影打造了「A New Member For U」(你的家庭新成員),讓智能汽車能夠察言觀色,時刻準備著主動提供專屬服務,成為真正懂你、與你心有靈犀、生活中不可或缺的「家庭新成員」。
「家庭新成員」會察言觀色,關心你和你身邊的一切,感知你的情緒,理解你的需求。而且它真正懂你所想,是和你心有靈犀的伙伴和家人,讓用戶感到溫暖貼心,當然也不會盲目打擾。同時,它在車上會不停記憶、不停思考、不停規劃,每分每秒都準備著為你服務。
例如,在旅途中,后排的孩子睡著了,「家庭新成員」會主動把空調溫度升高、音樂的聲量調低,底盤和駕駛模式都調整為舒適模式,給小朋友一個舒適安心的睡眠環境。這不需要用戶下指令,而是它觀察到了,思考和推理之后,主動的服務。既不打擾,又有溫度。
類人記憶,讓汽車真正擁有「有趣的靈魂」
「家庭新成員」能夠察言觀色,離不開商湯絕影強大的原生流式多模態大模型,在OpenCompass多模態評測榜單中,絕影多模態大模型的理解和推理能力位列第一。
絕影的多模態大模型能夠綜合理解文本、圖像、音頻、視頻、3D等信息模態,包括人的表情、語氣等,做到全場景的多模態感知。不止如此,商湯絕影還針對車載場景進行定制,融合車端感知數據、車端場景針對性訓練。
因此,New Member「家庭新成員」能全面感知用戶在車內的信息和需求,以及周圍環境數據,并進行深度理解和推理思考,具備理解世界、理解人類的能力。
除了強大的感知和理解能力外,要成為「家庭新成員」,汽車必須要有「記憶」。對人類來說,記憶很重要,因為它是認知功能的核心,也是情感的基礎和連接的紐帶。
《初戀五十次》是一部很經典的電影,講述的就是和記憶有關的故事。電影里男主愛上了患有短期記憶喪失的女主。女主每天醒來都會忘記前一天發生的事,因此男主每天都用不同的方法重新追求她,讓她愛上自己。電影結局是美好的,愛能夠跨越失去「記憶」的阻礙,當然,「記憶」的重要性也在故事被突顯出來。智能汽車也是類似的,有了「記憶」,車輛才能與你會產生默契,不斷成長,直到與你心有靈犀。
![[新聞稿]A+New+Member+For+U,商湯絕影以領先AI實力,讓汽車擁有「有趣的靈魂」1693.png](http://up.itheat.com/upload/article/2024/11/27-84eb5ccb33bf6daccc12064f78ef4b7d.png)
商湯絕影打造了國內首個「車載類人記憶框架」,與人類的記憶機制非常相似,包括臨時記憶、長期記憶和場景記憶三部分,三者結合讓系統實現類人的記憶能力。
臨時記憶,能記得一些瞬時信息,比如車里的物品、人的搭配、有沒有系安全帶等;也有長期記憶,就像是一個「檔案庫」,存儲用戶的基本信息、行為模式和偏好等,它可以自我迭代,能從用戶長期使用中總結規律并不斷優化。場景記憶或者說工作記憶,是通過從臨時記憶和長期記憶中提取重要信息,對這些信息實時處理和分析,作出決策或者解決問題。
例如,車內的小朋友看到路上其他小孩吃棉花糖,拿出棒棒糖想偷吃,New Member「家庭新成員」看到了這個小動作,「記得」小朋友剛看完牙醫,不能吃糖,進行主動提醒。
此外,商湯絕影還打造了能夠持續推理的Always-on運行框架,能夠將多模態感知到的信息與各種記憶相結合,進行高效的處理和反饋,做到時刻感知需求,主動為用戶服務。通過零拷貝技術和端側部署,「新成員」的系統數據延遲控制在1毫秒以內,端側也能快速響應,目前首包耗時最短僅需60毫秒,推理速度40Tokens/秒。
在追求智能和情感化的同時,商湯絕影始終堅持將用戶隱私與安全放在首位,通過全方位的隱私保護與數據安全體系,確保系統在安全合規的前提下提供極致體驗,為每一位用戶打造專屬的安全空間。
「家庭新成員」不僅是商湯絕影技術創新的又一里程碑,更是智能汽車行業持續向前進化的重要一步。未來,每一臺車都能擁有「有趣的靈魂」,智能汽車行業將迎來一個充滿無限可能的新時代。
A New Member For U,商湯絕影以領先AI實力,讓汽車擁有「有趣的靈魂」














滬公網安備 31010702005758號
發表評論注冊|登錄