商湯絕影再放“大招”，行業(yè)首個(gè)原生流式多模態(tài)座艙產(chǎn)品量產(chǎn)上車

在兩個(gè)月前的2024「絕影實(shí)力AI DAY」上，商湯絕影首發(fā)了AI汽車創(chuàng)新產(chǎn)品「A New Member For U」（你的家庭新成員），它能夠察言觀色，無時(shí)不在，心有靈犀，將會(huì)讓智能汽車擁有「有趣的靈魂」。而原生流式多模態(tài)大模型是打造「家庭新成員」的關(guān)鍵之一，也是它能察言觀色的核心所在。

就在近日，商湯絕影與國(guó)內(nèi)知名車企合作伙伴聯(lián)手打造的行業(yè)首個(gè)原生流式多模態(tài)座艙產(chǎn)品已經(jīng)量產(chǎn)上車，并向用戶進(jìn)行OTA推送。其能夠?qū)崿F(xiàn)「前車識(shí)別」、「交通標(biāo)志識(shí)別」和「沿途風(fēng)光識(shí)別」等功能，識(shí)別準(zhǔn)確率、識(shí)別范圍等性能全面領(lǐng)先行業(yè)，還能和車內(nèi)駕乘人員進(jìn)行深入交流與互動(dòng)，這位未來的「家庭新成員」邁出了成長(zhǎng)的第一步。

商湯絕影量產(chǎn)上車的多模態(tài)艙外識(shí)別功能包括三大能力，即前車識(shí)別、交通標(biāo)志識(shí)別、沿途風(fēng)光識(shí)別。

“懂車博士”——前車識(shí)別功能相當(dāng)于把馬路變成了流動(dòng)4S店，也是大型的車型展覽場(chǎng)，路上看到了喜歡的車型，或者不認(rèn)識(shí)但又想了解的車型，隨時(shí)隨地就可以讓車機(jī)這個(gè)“懂車博士”為你答疑解惑，從車型、價(jià)格、上市日期，到背后的發(fā)展歷史，幾乎無所不知。相較于已量產(chǎn)的同類功能，商湯絕影的前車識(shí)別功能認(rèn)得更準(zhǔn)、更多、更深、更新。前車識(shí)別準(zhǔn)確率超過90%，能夠識(shí)別的種類和范圍非常廣，尤其是豪車和小眾品牌。甚至是偽裝車、無車標(biāo)等特殊外觀，通過尾燈、外形、構(gòu)造等品牌特點(diǎn)也可以識(shí)別。無論是已經(jīng)不再生產(chǎn)的車型，還是上市不久的新車，都能夠快速識(shí)別。

“隨車教練”——交通標(biāo)志識(shí)別功能是行業(yè)首發(fā)的產(chǎn)品能力，其他上車的多模態(tài)大模型都沒有做到交通標(biāo)志的準(zhǔn)確識(shí)別。面對(duì)路面上越來越多的交通標(biāo)志，即使是老司機(jī)有時(shí)候也會(huì)不知所措，反應(yīng)不及。有了商湯絕影的「交通標(biāo)志識(shí)別」功能，就相當(dāng)于有了靠譜的駕校教練坐鎮(zhèn)車內(nèi)，交通標(biāo)志的識(shí)別和解讀信息不僅準(zhǔn)確完善，車機(jī)系統(tǒng)還可以根據(jù)用戶詢問，給出駕駛建議，讓司機(jī)駕駛起來更加安穩(wěn)放心。

“地陪達(dá)人”——沿途風(fēng)光識(shí)別功能能夠進(jìn)行車輛行駛途中的建筑物和景點(diǎn)的識(shí)別，準(zhǔn)確率高，達(dá)90%以上。在此基礎(chǔ)上，它還可以提供圖文介紹，詳細(xì)講解景點(diǎn)和建筑，相關(guān)的歷史典故、趣聞?shì)W事等都能信手拈來，娓娓道出。如果對(duì)這個(gè)沿途風(fēng)光感興趣，用戶可以詢問車機(jī)，進(jìn)一步了解信息，比如，朋友問你某個(gè)路過小區(qū)的房?jī)r(jià)，它也能輕松準(zhǔn)確應(yīng)對(duì)。不止如此，商湯絕影的沿途風(fēng)光功能還能結(jié)合不同用戶的需求，制定特色旅游路線并推薦給用戶，如網(wǎng)紅打卡路線、親子歡樂之旅、高校游覽路線、美食路線等，帶來全新的智慧出行體驗(yàn)。

從冰冷的工具和機(jī)械式的助手，進(jìn)化為「你的家庭新成員」，智能汽車正在經(jīng)歷一個(gè)逐步轉(zhuǎn)型與成長(zhǎng)的過程。商湯絕影的原生流式多模態(tài)座艙產(chǎn)品量產(chǎn)上車，艙外識(shí)別能力覆蓋了座艙、汽車周邊的環(huán)境，這意味著「家庭新成員」開始逐步認(rèn)識(shí)世界、理解世界，邁出了成長(zhǎng)的第一步。

這第一步邁得很踏實(shí)，首先，離不開商湯絕影強(qiáng)大的原生流式多模態(tài)大模型。在OpenCompass多模態(tài)評(píng)測(cè)榜單中，絕影多模態(tài)大模型的理解和推理能力排名第一，以此為基礎(chǔ)，「家庭新成員」能全面感知用戶的語(yǔ)音、表情、手勢(shì)、以及環(huán)境數(shù)據(jù)，并進(jìn)行深度理解和推理思考。

同時(shí)，車端模型部署能力是智能汽車交互革新不可或缺的技術(shù)保障。商湯絕影在行業(yè)率先實(shí)現(xiàn)原生多模態(tài)大模型的車端部署，如今可實(shí)現(xiàn)首包延遲低至60毫秒以內(nèi)，推理速度40 Tokens/秒。以云側(cè)、端云結(jié)合、端側(cè)等全棧方式靈活部署多模態(tài)大模型，商湯絕影能快速、準(zhǔn)確響應(yīng)用戶的識(shí)別需求，并充分保護(hù)個(gè)人隱私和數(shù)據(jù)安全。

作為最專注于汽車行業(yè)的AI公司，商湯絕影在智能座艙領(lǐng)域具備豐富的量產(chǎn)經(jīng)驗(yàn)。第三方調(diào)研數(shù)據(jù)顯示，商湯絕影在座艙視覺AI軟件市場(chǎng)的份額連續(xù)五年蟬聯(lián)第一，座艙AI大模型產(chǎn)品已上車智己全系車型、LEVC L380等車型。截至2024年底，商湯絕影已與超30家國(guó)內(nèi)外車企達(dá)成合作，覆蓋100余款車型，量產(chǎn)交付累計(jì)突破350萬(wàn)輛。

免責(zé)聲明：本文轉(zhuǎn)自網(wǎng)絡(luò)，僅代表作者個(gè)人觀點(diǎn)，與亞訊車網(wǎng)無關(guān)。其原創(chuàng)性以及文中陳述文字和內(nèi)容（包括圖片版權(quán)等問題）未經(jīng)本站證實(shí)，對(duì)本文以及其中全部或者部分內(nèi)容、文字的真實(shí)性、完整性、及時(shí)性本站不作任何保證或承諾，請(qǐng)讀者僅作參考，并請(qǐng)自行核實(shí)相關(guān)內(nèi)容。本站不承擔(dān)此類作品侵權(quán)行為的直接責(zé)任及連帶責(zé)任。

關(guān)鍵詞：識(shí)別,湯絕影,功能,模型,車型