智艙方面,商湯絕影行業(yè)首發(fā)智能座艙大模型創(chuàng)新產(chǎn)品“A New Member For U”(你的家庭新成員)。
智駕方面,商湯絕影構(gòu)建了“車云一體”的產(chǎn)品矩陣,發(fā)布涵蓋高速、城區(qū)以及泊車等全場景的高階智駕、端到端智駕等絕影量產(chǎn)智駕產(chǎn)品體系,同時全新升級行業(yè)標(biāo)桿級別的“開悟”世界模型,以此打造堅實的數(shù)據(jù)基礎(chǔ)設(shè)施。
據(jù)介紹,作為最專注汽車行業(yè)的AI公司,商湯絕影同時具備豐沛算力、原生汽車垂類大模型研發(fā)能力、高質(zhì)量數(shù)據(jù)體系和豐富量產(chǎn)經(jīng)驗等全棧實力,全力以赴推動大模型上車,打造領(lǐng)先的AI汽車創(chuàng)新技術(shù)和產(chǎn)品。
“我們已經(jīng)站在AGI時代的門口。作為加速智能汽車駛?cè)階GI時代的戰(zhàn)略合作伙伴,商湯絕影將牢牢把握住新一輪智能汽車變革的時間窗口,與車企伙伴進行全方位深度合作,共享大算力與大模型,共建數(shù)據(jù)基礎(chǔ)設(shè)施,共同打造智能汽車大模型創(chuàng)新應(yīng)用,才能攜手共贏,領(lǐng)航未來。” 商湯絕影CEO、商湯科技聯(lián)合創(chuàng)始人、首席科學(xué)家王曉剛表示。
商湯絕影CEO、商湯科技聯(lián)合創(chuàng)始人、首席科學(xué)家 王曉剛
引領(lǐng)座艙交互體驗的革新
車機不應(yīng)該只是聽話和服從的“被動智能”,依托AI實力重新定義座艙,商湯希望不只是賦予汽車以智能,更賦予智能以溫度。未來,它不再只是冰冷的工具或者機械式的助理,而是“A New Member For U”。
依托原生流式多模態(tài)大模型、車載類人記憶框架和持續(xù)運行框架等前沿AI大模型技術(shù),商湯絕影希望讓智能汽車擁有“有趣的靈魂”。
以商湯絕影的原生流式多模態(tài)大模型為基礎(chǔ),“家庭新成員”能全面感知用戶的語音、表情、手勢、以及環(huán)境數(shù)據(jù),并進行深度理解和推理思考,具備理解世界、理解人類的能力。
汽車也要擁有“記憶”,為此,商湯絕影打造了國內(nèi)首個“車載類人記憶框架”,讓系統(tǒng)實現(xiàn)類人的記憶能力。
商湯絕影的記憶框架與人類的記憶機制非常相似。它有臨時記憶,也有長期記憶,還可以自我迭代,從用戶長期使用中總結(jié)規(guī)律并不斷優(yōu)化。
此外,商湯絕影還打造了能夠持續(xù)推理的Always-on運行框架,將多模態(tài)感知到的信息與各種記憶相結(jié)合,依托端云協(xié)同架構(gòu),數(shù)據(jù)延遲控制在1毫秒以下,首包延時最快只需60毫秒,推理速度達40 Tokens/秒,對數(shù)據(jù)進行高效處理和反饋,時刻感知需求,主動為用戶服務(wù)。
隱私安全保護方面,通過全方位的隱私保護與數(shù)據(jù)安全體系,商湯絕影可以做到“數(shù)據(jù)跟人走”、“隱私數(shù)據(jù)不出車”、“不該說的不說”,確保系統(tǒng)在安全合規(guī)的前提下提供體驗。
端到端量產(chǎn)在即
智能駕駛方面,商湯絕影全面展示了基于J6E、J6M、Orin等不同算力平臺打造的全場景高階智駕、端到端智駕等絕影量產(chǎn)智駕產(chǎn)品體系。
據(jù)介紹,商湯絕影的智駕量產(chǎn)交付也在穩(wěn)步推進,基于J6平臺的智駕方案預(yù)計2025年第二季度將量產(chǎn)交付,而量產(chǎn)端到端智駕方案則預(yù)計會在明年年底量產(chǎn)落地。
目前,大多數(shù)車企和智駕公司都面臨著高質(zhì)量駕駛數(shù)據(jù)的獲取難度大、效率低、成本高的問題。
為解決這一問題,商湯絕影通過實車采集和仿真生成“雙輪驅(qū)動”的數(shù)據(jù)閉環(huán),構(gòu)建量產(chǎn)智駕產(chǎn)品體系和世界模型深度融合的“車云一體”智駕新范式。
“智駕高端局的競爭不止是車端模型的比拼,端到端的決戰(zhàn),戰(zhàn)場在云端。”王曉剛表示。
為此,商湯絕影全新升級并發(fā)布行業(yè)標(biāo)桿級別的世界模型——“開悟”世界模型。
據(jù)介紹,世界模型最基礎(chǔ)也是最核心的能力是生成高質(zhì)量視頻數(shù)據(jù),高質(zhì)量數(shù)據(jù)的關(guān)鍵在于“真實”?;诙嗄B(tài)大模型打造的絕影世界模型,能夠理解真實世界的物理規(guī)則、交通規(guī)則,生成的視頻數(shù)據(jù)也更加逼真。
在真實的基礎(chǔ)上,“開悟”生成的場景視頻,時間最長為150秒、分辨率可達1080P、視角可以實現(xiàn)11V,是行業(yè)首個同時完成上述指標(biāo)的智駕世界模型。
更重要的是,通過多模態(tài)大模型,“開悟”世界模型可以支持多樣化的自動駕駛場景及Corner case的可控生成。目前,商湯絕影基于1024類場景,能夠泛化出更多的平行世界,打造了千萬級的生成場景庫,預(yù)計2025年對行業(yè)開放。
攜手奇瑞大卓、東風(fēng)汽車開展深度戰(zhàn)略合作
據(jù)了解,商湯絕影智駕方案已量產(chǎn)交付廣汽埃安、一汽紅旗等3家車企6款車型。第三方調(diào)研數(shù)據(jù)顯示,商湯絕影在座艙視覺AI軟件市場的份額連續(xù)五年蟬聯(lián)第一。此外座艙AI大模型產(chǎn)品已上車小米SU7、智己、LEVC L380等車型。
值得關(guān)注的是,商湯絕影面向海外市場升級了座艙視覺AI產(chǎn)品矩陣,助力極氪X的DMS系統(tǒng)斬獲ENCAP歷史最高分,并在「絕影實力AI DAY」首發(fā)ENCAP2026 OOP離位檢測、身材檢測功能。
如今,商湯絕影已與超30家國內(nèi)外車企達成合作,覆蓋100余款車型,預(yù)計至2024年底,量產(chǎn)交付累計將突破350萬輛。
作為加速智能汽車駛?cè)階GI時代的戰(zhàn)略合作伙伴,商湯絕影正全力推動最前沿的AI技術(shù)與智能汽車產(chǎn)業(yè)的深度融合。
在商湯絕影看來,單打獨斗難以在AGI時代脫穎而出,主機廠和AI公司必須以全新的方式進行深度戰(zhàn)略合作才有可能形成行業(yè)競爭力。
據(jù)介紹,目前,商湯絕影已和大卓智能、東風(fēng)汽車等合作伙伴簽訂戰(zhàn)略合作協(xié)議,在高階智駕量產(chǎn)、端到端量產(chǎn)、AI云服務(wù)、AI大模型等領(lǐng)域開展全方位的深度合作,加速自動駕駛的落地與進化。
共享強大算力集群與大模型能力、共建數(shù)據(jù)基礎(chǔ)施設(shè)、共創(chuàng)智能汽車AI應(yīng)用生態(tài),這一全新合作模式是通往AGI未來的必由之路。
商湯絕影愿意和車企合作伙伴共享算力豐沛的商湯大裝置,行業(yè)領(lǐng)先的20,000 P算力將為合作伙伴提供強有力的基礎(chǔ)設(shè)施保障;同時,絕影將開放性能全面的基礎(chǔ)大模型能力,提升車企的AI實力。
在共享大算力和大模型的基礎(chǔ)上,雙方能夠加速研發(fā)體系的對齊,共同建設(shè)以高效率世界模型和全流程數(shù)據(jù)閉環(huán)為核心的數(shù)據(jù)基礎(chǔ)設(shè)施。未來,數(shù)據(jù)的數(shù)量、質(zhì)量和利用率等都不再是問題和阻礙,在智能汽車與云端平臺之間流動的數(shù)據(jù),將成為加速大模型上車的高效燃料。