芯耀
1124
作者：李寧遠(yuǎn)，物聯(lián)網(wǎng)智庫(kù) 原創(chuàng)
終端側(cè)智能是今年科技行業(yè)的主議題，從目前市場(chǎng)的動(dòng)向來(lái)看，消費(fèi)類(lèi)設(shè)備、汽車(chē)、機(jī)器人這幾個(gè)終端是目前最受關(guān)注的AI硬件方向。在汽車(chē)市場(chǎng)，隨著電動(dòng)化、智能化、網(wǎng)聯(lián)化汽車(chē)在全球市場(chǎng)的加速推進(jìn)，全球主要車(chē)企在智能座艙、智能駕駛領(lǐng)域紛紛加快了布局，年初的CES展上海內(nèi)外眾多車(chē)企的最新進(jìn)展以及眾多算力芯片廠(chǎng)商的新品都印證了這股風(fēng)潮。
通用人工智能技術(shù)的快速發(fā)展，已經(jīng)驅(qū)動(dòng)汽車(chē)行業(yè)進(jìn)行一波產(chǎn)業(yè)升級(jí)，在此期間各類(lèi)云端大模型被引入應(yīng)用來(lái)支持車(chē)載智能功能的迭代。隨著AI處理的重心正逐漸從云端向終端轉(zhuǎn)移，優(yōu)化后的端側(cè)模型在隱私保護(hù)、低延遲響應(yīng)及個(gè)性化定制等方面具有顯著優(yōu)勢(shì)，汽車(chē)端側(cè)算力與模型的部署正成為發(fā)展的又一風(fēng)向標(biāo)。
從傳統(tǒng)汽車(chē)到智能汽車(chē)，這一轉(zhuǎn)變不僅僅是技術(shù)的革新，也在重塑人們對(duì)出行方式的理解。如其中的智能座艙，作為人機(jī)交互的主要窗口，率先開(kāi)啟了AI進(jìn)程。去年新舊造車(chē)勢(shì)力，中外汽車(chē)品牌就啟動(dòng)了AI大模型在座艙領(lǐng)域的全面應(yīng)用，從語(yǔ)音、交互、個(gè)性化場(chǎng)景等多個(gè)維度，來(lái)重新定義智能座艙的應(yīng)用創(chuàng)新與人機(jī)交互體驗(yàn)。到今年，端側(cè)模型上車(chē)更多本地智能的支持也將開(kāi)始推動(dòng)智能汽車(chē)向汽車(chē)智能體轉(zhuǎn)變。
在AI落地的新半場(chǎng)，端側(cè)AI推動(dòng)的智能汽車(chē)革命已經(jīng)到來(lái)，進(jìn)一步改變?nèi)藗兊某鲂蟹绞揭I(lǐng)著交通領(lǐng)域的全面升級(jí)。
端側(cè)強(qiáng)智能拓展汽車(chē)智駕、座艙功能
當(dāng)前，終端側(cè)AI在汽車(chē)智能駕駛升級(jí)、智能座艙升級(jí)（特別是端側(cè)大模型應(yīng)用以及多模態(tài)交互融合）上有著明顯的推動(dòng)作用。國(guó)內(nèi)華為、比亞迪、蔚來(lái)、小鵬、理想等廠(chǎng)商，國(guó)外特斯拉、豐田、寶馬等均在在這些領(lǐng)域均有著深厚的布局，不僅致力于研發(fā)先進(jìn)的智駕軟硬件，還在智能座艙、語(yǔ)音識(shí)別與自然語(yǔ)言處理等方面取得了顯著成果。
智能駕駛
智駕一直都是汽車(chē)科技的前沿陣地，2024年中國(guó)發(fā)布首個(gè)自動(dòng)駕駛國(guó)標(biāo)，年底北京、武漢多地出臺(tái)相關(guān)條例似乎預(yù)示著L3級(jí)自動(dòng)駕駛即將邁向商用，2025年智駕領(lǐng)域的動(dòng)靜肯定不會(huì)小。
比亞迪已經(jīng)明確表示在2025年聚焦于“智駕平權(quán)”，即通過(guò)規(guī)模化推廣智能駕駛系統(tǒng)，完成智駕在主流車(chē)型上的落地。
目前智駕方案可以分為算力方案與算法方案，蔚小理、比亞迪、吉利等主機(jī)廠(chǎng)走從算法到芯片的發(fā)展路線(xiàn)，蔚來(lái)“神璣NX9031”已搭載于蔚來(lái) ET9、小鵬和吉利已成功流片、而理想和比亞迪正在推進(jìn)自研智駕芯片項(xiàng)目。
華為是非常特殊的玩家，既是供應(yīng)商也有終端品牌，華為車(chē)BU從算法到算力全棧自研，基于昇騰的算力方案只供給鴻蒙智行車(chē)型以及阿維塔、深藍(lán)這些。
芯片廠(chǎng)商也開(kāi)始做智駕算法上的突破，像英偉達(dá)、地平線(xiàn)，算力和算法供應(yīng)商都開(kāi)始往軟硬一體的方向在走，增大自己在智駕產(chǎn)業(yè)鏈上的價(jià)值空間。
回到智駕功能本身，算力硬件和傳感硬件是智駕得以實(shí)現(xiàn)的基礎(chǔ)。終端側(cè)AI對(duì)算力需求引領(lǐng)了算力平臺(tái)的持續(xù)革新。極具代表性的高通智駕Snapdragon Ride至尊版平臺(tái)就在SoC中添加了面向多模態(tài)AI設(shè)計(jì)的專(zhuān)用神經(jīng)網(wǎng)絡(luò)處理器NPU以及為汽車(chē)定制的Oryou CPU，該平臺(tái)采用的NPU配備了Transformer加速器和矢量引擎，并支持混合精度，旨在實(shí)現(xiàn)低時(shí)延、高精度且高效的端到端Transformer，從而保持最佳能效和性能。
英偉達(dá)的Thor處理器算力更強(qiáng)勁，這款計(jì)算能力達(dá)上一代產(chǎn)品Orin 20倍的芯片也正式進(jìn)軍汽車(chē)市場(chǎng)，不僅限于自動(dòng)駕駛芯片，更是為汽車(chē)的中央計(jì)算架構(gòu)量身打造。黑芝麻智能的華山A2000內(nèi)置高性能NPU核心，支持高階智駕和具身智能等多種終端算力需求。當(dāng)前汽車(chē)終端側(cè)算力的提升為智駕落地提供了充足動(dòng)力。
在傳感硬件上，TI1近期發(fā)布的60GHz毫米波雷達(dá)傳感也體現(xiàn)了硬件向終端側(cè)智能發(fā)展的風(fēng)向，該毫米波雷達(dá)傳感，整合了乘員檢測(cè)、兒童存在檢測(cè)和入侵檢測(cè)三項(xiàng)車(chē)內(nèi)傳感安全功能，并采用運(yùn)行終端側(cè)AI算法的單芯片，在端側(cè)直接進(jìn)行數(shù)據(jù)處理與分析決策，提高準(zhǔn)確性并且縮短處理時(shí)間，實(shí)現(xiàn)更安全的駕駛環(huán)境；飛凌微車(chē)載視覺(jué)應(yīng)用M1系列芯片在支持高性能圖像處理同時(shí)也能支持端側(cè)視覺(jué)感知預(yù)處理。
在智駕領(lǐng)域，傳感會(huì)吃掉汽車(chē)終端側(cè)很多算力，導(dǎo)致規(guī)劃定位環(huán)節(jié)算力緊缺。現(xiàn)在整個(gè)汽車(chē)終端算力的提升以及傳感端側(cè)智能的優(yōu)化，算力更加充裕，傳感側(cè)響應(yīng)時(shí)間大幅縮短，在這種端側(cè)強(qiáng)智能的背景下全場(chǎng)景智駕實(shí)現(xiàn)的腳步會(huì)越來(lái)越快。
值得一提的是這些其實(shí)和人形機(jī)器人很像，相關(guān)軟硬件技術(shù)棧也較為重合，所以不少車(chē)廠(chǎng)都開(kāi)始入局人形機(jī)器人，把握未來(lái)智能時(shí)代最大的兩個(gè)端側(cè)硬件方向。
智能座艙
智能座艙絕對(duì)是國(guó)內(nèi)車(chē)廠(chǎng)卷得最厲害的方向，從前單一的駕駛空間現(xiàn)在已轉(zhuǎn)變?yōu)榧Y訊、娛樂(lè)、交互、控制于一體的智能空間。智能汽車(chē)研究院監(jiān)測(cè)數(shù)據(jù)顯示，2024年1-11月，中國(guó)市場(chǎng)（不含進(jìn)出口）乘用車(chē)前裝標(biāo)配智能座艙搭載率從上年同期的61.06%，進(jìn)一步提升至72.36%。
根據(jù)畢馬威分析數(shù)據(jù)，2026年中國(guó)智能座艙市場(chǎng)規(guī)模將達(dá)到2127億元，2022年至2026年的年復(fù)合增長(zhǎng)率約17%，滲透率有望從59%提升至82%。
全場(chǎng)景AI智能語(yǔ)音交互，傳感器接入實(shí)現(xiàn)艙駕監(jiān)測(cè)已經(jīng)不再是新鮮的功能。端側(cè)大模型應(yīng)用以及多模態(tài)交互融合才是未來(lái)智能空間的必需。
傳統(tǒng)智能座艙的AI也是由端側(cè)和云端構(gòu)成，但重心在云端，端側(cè)普遍只支持10億參數(shù)以下小規(guī)模的模型。這樣的智能座艙體驗(yàn)已經(jīng)有些落后。往后智能座艙中，將支持幾十億參數(shù)以上端側(cè)大模型，做到端側(cè)強(qiáng)智能，并實(shí)現(xiàn)以端側(cè)本地智能為側(cè)重的端云混合。
在CES上亮相的DESAYSV座艙產(chǎn)品NPU性能最高算力性能提升12倍，已經(jīng)能夠運(yùn)行幾十億參數(shù)的座艙端側(cè)模型。端側(cè)強(qiáng)智能是智能座艙內(nèi)卷的確定方向。
除了華為、理想、蔚來(lái)、北汽等汽車(chē)廠(chǎng)商在持續(xù)推進(jìn)汽車(chē)端＋云模型的升級(jí)，像科大訊飛去年也針對(duì)汽車(chē)端側(cè)發(fā)布了星火大模型，該模型在車(chē)載應(yīng)用中的效果損失小于等于1%，并且在端側(cè)的首次響應(yīng)時(shí)間僅需40毫秒，端云融合交互時(shí)間更是低至1.3秒，這種及時(shí)性是端側(cè)優(yōu)勢(shì)也是智能座艙急需的。英特爾也正在推動(dòng)和合作伙伴把端側(cè)大模型、AI智能體部署到汽車(chē)本地。
端側(cè)的多模態(tài)應(yīng)用同樣重要，人車(chē)交互體驗(yàn)的關(guān)鍵恰恰取決于理解和生成能力，依靠多模態(tài)的理解和生成，可以處理和生成多種類(lèi)型數(shù)據(jù)的大模型，通再過(guò)量化、剪枝和蒸餾的方式將其部署到端側(cè)，可以提供實(shí)時(shí)的更真實(shí)的交互，這些更主動(dòng)更懂用戶(hù)意圖的多模態(tài)交互引領(lǐng)的是一個(gè)全新汽車(chē)智能空間生態(tài)。
出于實(shí)時(shí)響應(yīng)的要求以及對(duì)用戶(hù)隱私數(shù)據(jù)的保護(hù)需求，用于多模態(tài)感知的大模型肯定是部署在端側(cè)，換言之，端側(cè)部署的多模態(tài)感知大模型將成為已經(jīng)內(nèi)卷嚴(yán)重的智能座艙又一個(gè)激烈戰(zhàn)場(chǎng)。
實(shí)現(xiàn)AI Car仍有不少難關(guān)
在此前的《機(jī)器人與模型深度融合開(kāi)啟智能升級(jí)下半場(chǎng)，智能終端的未來(lái)終局是物理AI》中提到過(guò)，終端側(cè)智能正在將AI從數(shù)字世界帶入物理世界。
和被寄予厚望的人形機(jī)器人一樣，目前目標(biāo)是端側(cè)強(qiáng)智能的智能汽車(chē)，未來(lái)同樣有望借助多模態(tài)原生世界模型，打通物理世界和數(shù)字世界，成為整合人的需求并能與交通系統(tǒng)協(xié)同優(yōu)化的具身智能實(shí)體，成為真正的AI Car。但在整個(gè)實(shí)現(xiàn)路徑上，仍舊面臨著不少挑戰(zhàn)。
首先，端側(cè)算力雖然在不斷提高，但端側(cè)大模型在算力資源利用上仍要與終端芯片架構(gòu)、算力性能協(xié)同適配，端側(cè)模型架構(gòu)和模型壓縮等技術(shù)仍需進(jìn)一步研究。
其次，與AI PC、AI Phone等消費(fèi)類(lèi)終端設(shè)備相比，智能汽車(chē)感知來(lái)源多，既有對(duì)車(chē)外環(huán)境的感知也有車(chē)內(nèi)空間的感知，且這些感知數(shù)據(jù)大部分是動(dòng)態(tài)的。內(nèi)外多傳感器的輸入，使得多模態(tài)信息融合異常困難。需要同時(shí)處理視覺(jué)、音頻、空間等動(dòng)態(tài)信息，構(gòu)建能在不確定的環(huán)境下具備理解空間與物理過(guò)程并提供泛化決策能力的多模態(tài)模型。
第三，強(qiáng)感知理解高實(shí)時(shí)性響應(yīng)之外，車(chē)內(nèi)感知會(huì)收集到大量用戶(hù)隱私數(shù)據(jù)。端側(cè)智能將數(shù)據(jù)處理集中在本地，一定程度上避免了數(shù)據(jù)頻繁上傳云端能更好地保護(hù)用戶(hù)隱私。但在有限的端側(cè)設(shè)備算力和存儲(chǔ)資源下實(shí)現(xiàn)隱私保護(hù)需要更多技術(shù)手段介入。以及當(dāng)端側(cè)AI智能體基于第三方應(yīng)用完成任務(wù)時(shí)，數(shù)據(jù)的控制權(quán)和保護(hù)責(zé)任也需要進(jìn)一步明確劃分。
雖然端側(cè)AI推動(dòng)的智能汽車(chē)革命已經(jīng)到來(lái)，但在實(shí)現(xiàn)真正的AI Car的道路上，仍需要克服諸多挑戰(zhàn)。汽車(chē)軟硬件全棧技術(shù)與AI的深度融合的同時(shí)完善相關(guān)法律法規(guī)，提升用戶(hù)接受度，才能推動(dòng)智能汽車(chē)向AI Car的持續(xù)發(fā)展。
寫(xiě)在最后
在新能源進(jìn)程的下半場(chǎng)與AI開(kāi)始擁抱終端硬件重合的時(shí)間節(jié)點(diǎn)，汽車(chē)行業(yè)正在加速向數(shù)智化新階段邁進(jìn)。在這場(chǎng)變革中，誰(shuí)能率先利用端側(cè)智能完成賦能，誰(shuí)就將在未來(lái)的市場(chǎng)競(jìng)爭(zhēng)中搶占先機(jī)。
