日本无码免费高清在线|成人日本在线观看高清|A级片免费视频操逼欧美|全裸美女搞黄色大片网站|免费成人a片视频|久久无码福利成人激情久久|国产视频一二国产在线v|av女主播在线观看|五月激情影音先锋|亚洲一区天堂av

  • 手機(jī)站
  • 小程序

    汽車測(cè)試網(wǎng)

  • 公眾號(hào)
    • 汽車測(cè)試網(wǎng)

    • 在線課堂

    • 電車測(cè)試

逯建楓:端到端大模型催化智駕革命,智駕芯片如何演進(jìn)?

2024-07-19 09:28:58·  來源:NE時(shí)代智能車  
 

2024年7月11-13日,2024中國汽車論壇在上海嘉定舉辦。本屆論壇以“引領(lǐng)新變革,共贏新未來”為主題,由“閉門峰會(huì)、大會(huì)論壇、10多場(chǎng)主題論壇、9場(chǎng)重磅發(fā)布、主題參觀活動(dòng)”等多場(chǎng)會(huì)議和若干配套活動(dòng)構(gòu)成,各場(chǎng)會(huì)議圍繞汽車行業(yè)熱點(diǎn)重點(diǎn)話題,探索方向,引領(lǐng)未來。其中,在7月12日下午舉辦的“主題論壇五:高級(jí)別自動(dòng)駕駛加速,驅(qū)動(dòng)未來出行革新”上,愛芯元智車載事業(yè)部技術(shù)副總裁逯建楓發(fā)表精彩演講。以下內(nèi)容為現(xiàn)場(chǎng)演講實(shí)錄:


圖片


大家下午好!


因?yàn)槲覀兪亲鲂酒模沂紫确浅i_心能代表愛芯元智車載事業(yè)部給大家分享一下我們對(duì)高階智駕的一些思考。愛芯元智的車載業(yè)務(wù)有自己的品牌叫愛芯元速,希望以此來賦能我們的合作伙伴,來加速智駕行業(yè)的發(fā)展和迭代。


特斯拉FSD一直以來是比較有話題性的信息,從我個(gè)人角度來講,基本上經(jīng)常會(huì)時(shí)不時(shí)在網(wǎng)上看一看它的小視頻,整個(gè)差不多從2020年以來經(jīng)??纯此囊曨l,整個(gè)迭代大概迭代到什么樣的程度,發(fā)展得怎么樣。但是在FSDv12.3版本之前,看起來性能可以,但是整個(gè)是差強(qiáng)人意的。但是去年11月份開始,F(xiàn)SDv12.3版本發(fā)布以來,體現(xiàn)出來的效果還是讓人非常驚艷,讓我們感覺到智駕真正往L3發(fā)展的過程中,它的MPI有可能降低到一定的程度,讓我們的L3落地變得可實(shí)現(xiàn)性更強(qiáng)一些。


視頻展現(xiàn)出來的,它有強(qiáng)大的泛化能力。比如說以前在城區(qū)范圍里面,一般的自動(dòng)駕駛系統(tǒng)經(jīng)常會(huì)接管率比較高,尤其是面對(duì)復(fù)雜場(chǎng)景,經(jīng)常有時(shí)候開不動(dòng),停在一個(gè)具體的位置,不能動(dòng)彈。但是在這個(gè)版本里面,它表現(xiàn)得非常好。同時(shí)它還有一個(gè)比較好的擬人的駕駛風(fēng)格,擬人的駕駛風(fēng)格有一個(gè)好處,人在使用系統(tǒng)時(shí)比較有安全感,因?yàn)樗_起來更像人。它有更加靈活的行車交互的性能,這也是一個(gè)比較好的優(yōu)勢(shì)。最關(guān)鍵的就是它的安全性接管的里程大幅度上升。


右側(cè)可以看到基本上是從國外拿過來它的幾個(gè)數(shù)據(jù),首先是安全接管里程,尤其是城區(qū)如此復(fù)雜場(chǎng)景,從上個(gè)版本的60,現(xiàn)在提升到153。它整個(gè)的Total Miles的里程度也是從116提升到200多,也是非常高的。最關(guān)鍵的是右下角,我們講的MPI,百公里接管率就是下面的這個(gè)指標(biāo),它一次形成從A點(diǎn)到B點(diǎn)完整行程,從21%一路走來到當(dāng)前的版本一路到70%,這個(gè)就表現(xiàn)非常不錯(cuò)。


在這個(gè)基礎(chǔ)之上,我們?cè)倩氐絿鴥?nèi),首先要提的就是UniAD,去年6月份是一篇比較火的論文,它這個(gè)技術(shù)框架就是剛剛有嘉賓提到的,one-model的方式,我們愛芯判斷one-model的方式才是一個(gè)相對(duì)靠譜的一個(gè)端到端的形式,盡管它在模型訓(xùn)練的環(huán)節(jié)可能會(huì)對(duì)算力要求更高。但是只有在這種技術(shù)架構(gòu)的前提下,它把各個(gè)模塊之間通過傳遞參數(shù)信息(parameter),變成傳遞矩陣信息(feature),才能最大化地保留它的各個(gè)模塊之間的損失,性能才能提上來。對(duì)我們來說,尤其我們做芯片來講,做芯片整個(gè)設(shè)計(jì)周期和研發(fā)周期比較長,要對(duì)未來做一些預(yù)判,所以我們是跳過了two-model的模式,現(xiàn)在比較盯著one-model的方式來做,就是UniAD。


其實(shí)我想提第二個(gè),第二個(gè)就是生成式AI技術(shù)如何在自動(dòng)駕駛技術(shù)棧落地。中間的就是DriveVLM視覺語言大模型,我們認(rèn)為這可能是面向終局的一個(gè)方向。為什么?因?yàn)槲覀儸F(xiàn)在自動(dòng)駕駛系統(tǒng)其實(shí)有點(diǎn)像一個(gè)人的小腦,它可能每次開車的時(shí)候是一個(gè)無意識(shí)的狀態(tài),我們自己開車,平時(shí)開車是屬于基于習(xí)慣的,基于潛意識(shí)的這種狀態(tài)在開車,尤其在自己熟悉的道路上。但是長尾的問題我們?nèi)祟愒趺唇鉀Q的?


遇到不熟悉的道路,遇到一些特殊情況,我們一般會(huì)把車速降下來,自己好好觀察一下這個(gè)環(huán)境,這個(gè)好好觀察就意味著我們大腦介入了,大腦介入場(chǎng)景里面做嚴(yán)謹(jǐn)?shù)姆治?,?yán)謹(jǐn)?shù)臎Q策,再看我們?cè)趺醋?。DriveVLM里面生成式AI技術(shù),就是它有一個(gè)大模型,它就是這個(gè)作用。當(dāng)然這里面替代小腦,下面很像UniAD技術(shù)棧,它代表的是一個(gè)小腦的作用,它是一個(gè)快系統(tǒng),它反應(yīng)起來更快一些。上面這一大部分其實(shí)就是生成式AI,它代表的是一個(gè)大腦的作用,雖然反應(yīng)會(huì)慢一些,但是在長尾里面,可以思考得更深度更高一些。我們認(rèn)為DriveVLM類似的架構(gòu)才是終局,未來在芯片的NPU設(shè)計(jì)一定會(huì)考慮到這種方式。


接下來回到這樣一個(gè)算法的技術(shù),在我們已有的智能駕駛方案里面所扮演的作用。


對(duì)智駕方案分類非常多,我們主機(jī)廠的角度從功能的角度進(jìn)行考量,來進(jìn)行分割,包括L2、L2+、L2.5、L2.9等等是功能視角。我們是做芯片的,芯片是一個(gè)硬件的視角,硬件視角看待我們的智駕方案一般就是要看它的零部件的形態(tài),這個(gè)大家一般都比較清楚。


最基礎(chǔ)的就是一體機(jī),稍微高階一點(diǎn)的是5V到7V就是中型的域控制器的形態(tài)。最高階就一般是11V到13V,現(xiàn)在已經(jīng)向11V收斂,一個(gè)11V的大型域控制器,我們從硬件角度可以識(shí)別出這三種大的方案形態(tài)。


在這個(gè)方案形態(tài)里面,它的感知算法也是不一樣的。我們自己內(nèi)部也討論過這個(gè)問題,現(xiàn)在這種端到端的技術(shù)方案會(huì)顛覆哪種方案形態(tài)?其實(shí)目前看起來只有在最高端才會(huì)產(chǎn)生一些變化,所以根據(jù)這種判斷,我們習(xí)慣用智駕1.0或者ADAS1.0、2.0的這種概念。


我們自己做的梳理,首先在一體機(jī),算法就是一般的感知算法,只有感知算法是基于AI的,剩下的這些規(guī)控都是基于rule-based甚至是model base design(基于模型的設(shè)計(jì)),連code base design(基于代碼的設(shè)計(jì))都不算。


中型域控制器是相對(duì)比較復(fù)雜的,早期是基于分離式感知,雖然是攝像頭比較多,可能5-7個(gè)攝像頭,但是都是單攝的感知,但是有了BEV和transformer之后,它的整個(gè)感知性能會(huì)有一個(gè)提升,所以它這里面會(huì)有兩種形態(tài)。這一塊我們也會(huì)有一些思考,這會(huì)影響到我們的NPU的設(shè)計(jì)。


第三個(gè)階段,ADAS3.0,前兩年大家做城區(qū)的NOA,為了把城區(qū)的NOA做好,因?yàn)閷?duì)泛化能力有要求,所以要占用網(wǎng)格OCC,包括GOD一般障礙物的檢測(cè),這些感知也就加入了進(jìn)來,這本來大家以為就是到了三個(gè)階段就結(jié)束了,結(jié)果從去年端到端的這項(xiàng)技術(shù),從我們的角度硬生生拆出來一個(gè)ADAS4.0的階段,這個(gè)階段對(duì)整個(gè)自動(dòng)駕駛的技術(shù)范式產(chǎn)生顛覆的影響。


ADAS1.0到4.0的框架來指導(dǎo)我們后續(xù)NPU的設(shè)計(jì)。


愛芯元速在四個(gè)不同的ADAS階段都會(huì)有對(duì)應(yīng)的NPU的技術(shù)出現(xiàn)。


面向1.0,就是平常所說的一體機(jī),它對(duì)性能沒有特別高的要求,因?yàn)槭艿絅CAP(新車評(píng)價(jià)規(guī)程)的需求牽引,一般是跑一些CNN的網(wǎng)絡(luò),一些比較低功耗的小模型,所以這一塊我們會(huì)對(duì)應(yīng)第二代的NPU來應(yīng)對(duì)這種情況。


在第三代的NPU里面,就是ADAS2.0階段,我們思考過這一塊原來目前已有芯片和方案采用分立式的感知,由于它的傳感器使用數(shù)量比較少,這個(gè)時(shí)候必須上一些更好、更高級(jí)的算法才能把性能提上來或者維持得住,所以我們第三代NPU支持了BEV和transformer這種更高端的算法。但是有一點(diǎn)它只是做感知。


ADAS3.0階段已經(jīng)支持端到端,而且支持one-model的方式。其實(shí)對(duì)我們整個(gè)城區(qū)NOA是比較大的提升,雖然現(xiàn)在做芯片,但是判斷整個(gè)行業(yè)是有希望把MPI降到非常低的比例,這樣能讓我們整個(gè)NOA的可用性大大增強(qiáng)。


但是這個(gè)遠(yuǎn)遠(yuǎn)不夠,在ADAS4.0階段,就是第X代,也不一定是第六代,我們還有安防業(yè)務(wù),安防業(yè)務(wù)迭代得更快,我們下一代面向車載這一塊的NPU會(huì)考慮到生成式AI,跑一些大模型,視覺語言大模型的方式來給我們的整個(gè)智駕方案增加一個(gè)大腦,來把這些長尾的疑難場(chǎng)景一掃而光。


挑第五代的NPU跟大家展開來聊聊這種端到端大模型對(duì)芯片NPU設(shè)計(jì)的影響。


剛剛聊了這么多大模型,在芯片角度有三個(gè)最關(guān)鍵的需求是我們需要考慮的:一是高帶寬;二是高內(nèi)存;三是異構(gòu)多核大算力。


第一,在架構(gòu)設(shè)計(jì)上,我們采用的是一個(gè)異構(gòu)多核的架構(gòu)。我們會(huì)考慮到片間互聯(lián)技術(shù),以自己開發(fā)的一些ISA指令集來大大地提升計(jì)算的效率。


第二,為了承接它的高帶寬和高內(nèi)存的需求,我們會(huì)有一個(gè)近存計(jì)算的概念,就是SDMA,這一塊是能夠大大提高它的傳輸效率。


有了一個(gè)能夠支持端到端的NPU技術(shù),我們還需要一個(gè)比較好的工具鏈來支撐。


愛芯元智的工具鏈目前已經(jīng)能夠比較好地支持UniAD,就是one-model的端到端的一些算法和算子的子結(jié)構(gòu),包括BEV,包括transformer,包括雙目,包括光流,包括占用網(wǎng)絡(luò)等等算子都是支持的比較好。右邊包括輕量級(jí)的LLM也能支持,當(dāng)然它未來想要支持得更好,肯定就是需要再開發(fā)上一頁的NPU X,那一代希望支持得更好一些。


剛剛從芯片的角度梳理了一下端到端這項(xiàng)技術(shù)的算法大概的總結(jié),以及算法對(duì)NPU設(shè)計(jì)的影響,以及對(duì)應(yīng)能夠承接這項(xiàng)NPU技術(shù)的工具鏈,我們做了完整的梳理。


接下來介紹一下我們的產(chǎn)品規(guī)劃。


我們從2022年7月份,M55是第一顆量產(chǎn)芯片,它是做一體機(jī)的一顆芯片,當(dāng)前是一體機(jī)的方案上,在CMS方案上都有量產(chǎn)記錄,而且量產(chǎn)的定點(diǎn)項(xiàng)目越來越多。


M76這是中型域控的芯片,它經(jīng)過我們的思考,我們是增加了transformer和BEV的技術(shù)架構(gòu),雖然傳感器比較少,5-7V,但是通過這樣一個(gè)新的方式,能夠把它的高速NOA、城區(qū)熟路模式能夠很好地cover掉。


與此同時(shí),今天正好想強(qiáng)調(diào)一下基于M55目前在一體機(jī)方案里面也迭代了一顆新的芯片叫M57,這顆芯片是一顆極致性價(jià)比的芯片,把MCU吃進(jìn)去了,它內(nèi)置了一顆MCU。它對(duì)800萬的支持更好一些,同時(shí)也支持5V的行泊一體,這個(gè)方案的靈活性和性價(jià)比很高。


需要強(qiáng)調(diào)的就是M77芯片,這個(gè)M77就是目前支持端到端的算法的一顆芯片,它基于UniAD one-model的方式算法方案的芯片,目前國內(nèi)支持的是最好的之一,希望對(duì)我們未來這兩年在城區(qū)NOA的合作方,在這個(gè)賽道上能夠支撐他們獲取更高的競(jìng)爭力。


匯報(bào)一下我們的業(yè)務(wù)進(jìn)展。


M55是2022年7月份量產(chǎn),現(xiàn)在已經(jīng)有幾十萬的出貨,其中在一體機(jī)市場(chǎng)上目前出貨量排第二,同時(shí)這顆芯片由于工具鏈的效果比較好,易用性比較強(qiáng),也是目前業(yè)內(nèi)最快量產(chǎn)的一顆芯片,整個(gè)量產(chǎn)周期非常短。


除此之外,包括M55,包括M76這兩顆芯片,目前整個(gè)業(yè)務(wù)推廣非常順利,尤其是今年下來,不光是有新勢(shì)力車企,還包括傳統(tǒng)的車企,也包括合資車企都采用了我們的方案。


前后呼應(yīng)一下,愛芯元速希望成為車載行業(yè)的長期價(jià)值提供者。愛芯元智這家公司就是一個(gè)以技術(shù)創(chuàng)新驅(qū)動(dòng)的一家公司,我們車載事業(yè)部也是秉承這種理念,在創(chuàng)新上,在技術(shù)上也是深度地去挖掘,包括對(duì)整個(gè)技術(shù)的預(yù)判做得也是非常深入,提前預(yù)判,提前布局,這也是我們?nèi)〉贸晒Φ年P(guān)鍵之一。


不光是在技術(shù)上要爭奪先進(jìn)性,在整個(gè)市場(chǎng)規(guī)模落地這一塊,我們通過一些工具鏈的優(yōu)化,通過更好對(duì)客戶的服務(wù)和賦能,來幫助我們的合作伙伴更快地拿到一個(gè)自動(dòng)駕駛的市場(chǎng)份額,也幫助自己的市場(chǎng)規(guī)模的提升。


愛芯元速其實(shí)是堅(jiān)持定位Tier2,并為我們的合作伙伴做長期的賦能,堅(jiān)持做車載行業(yè)的價(jià)值提供者。

分享到:
 
反對(duì) 0 舉報(bào) 0 收藏 0 評(píng)論 0
滬ICP備11026917號(hào)-25