自動(dòng)駕駛技術(shù)在不斷演進(jìn)，為了更全面地評(píng)估語言引導(dǎo)自動(dòng)駕駛系統(tǒng)的性能，LangAuto基準(zhǔn)應(yīng)運(yùn)而生。相較于之前的CARLA基準(zhǔn)，LangAuto基準(zhǔn)通過提供自然語言導(dǎo)航指令和通知指令，以閉環(huán)方式評(píng)估自動(dòng)駕駛性能，為智體的指令跟從能力提供全面而具體的測試場景。

LangAuto基準(zhǔn)是CARLA基準(zhǔn)的新進(jìn)化，旨在評(píng)估自動(dòng)駕駛系統(tǒng)對(duì)語言指令的應(yīng)對(duì)能力。與之前的CARLA基準(zhǔn)相比，LangAuto基準(zhǔn)包括8個(gè)公共城鎮(zhèn)，覆蓋各種場景，如高速公路、十字路口和環(huán)形交叉口。為了考慮不同的環(huán)境條件，LangAuto考慮了16種組合，包括7種天氣條件和3種日光條件。此外，LangAuto基準(zhǔn)還引入了三個(gè)不同的tracks，分別是LangAuto track、LangAuto-通知 track和LangAuto-序貫 track，全面測試智體在不同場景下的性能。

LangAuto基準(zhǔn)的核心要素

LangAuto基準(zhǔn)通過LangAuto track、LangAuto-通知 track和LangAuto-序貫 track三個(gè)核心tracks來測試自動(dòng)駕駛系統(tǒng)的性能。其中，LangAuto track要求智體根據(jù)其當(dāng)前位置執(zhí)行導(dǎo)航指令，而LangAuto-通知 track則在LangAuto track的基礎(chǔ)上添加了額外的通知指令，模擬真實(shí)場景中的實(shí)時(shí)通知。最后，LangAuto-序貫 track將連續(xù)的2到3條指令合并為一條長指令，以模擬來自乘客或?qū)Ш杰浖亩嗾Z句指令的情況。這三個(gè)tracks共同構(gòu)成LangAuto基準(zhǔn)，為自動(dòng)駕駛系統(tǒng)提供了全面而嚴(yán)格的性能評(píng)估。

LangAuto track的詳細(xì)分析

LangAuto track是LangAuto基準(zhǔn)的核心組成部分，通過提供導(dǎo)航指令，評(píng)估智體在不同路線長度下的性能。為了更好地區(qū)分性能，LangAuto track被劃分為三個(gè)子tracks，分別是LangAuto、LangAuto-Short和LangAuto-Tiny，對(duì)應(yīng)不同的路線長度。這種細(xì)分設(shè)計(jì)使LangAuto基準(zhǔn)能夠全面檢測智體的導(dǎo)航能力，從而更準(zhǔn)確地評(píng)估其在閉環(huán)駕駛場景中的表現(xiàn)。

LangAuto-通知 track的挑戰(zhàn)與意義

LangAuto-通知 track在LangAuto track的基礎(chǔ)上引入了額外的通知指令，模擬了長距離復(fù)雜或?qū)剐詧鼍爸械膶?shí)時(shí)通知。這樣的設(shè)計(jì)挑戰(zhàn)了自動(dòng)駕駛系統(tǒng)對(duì)復(fù)雜信息的處理能力，同時(shí)也在實(shí)際駕駛場景中更貼近乘客或其他輔助系統(tǒng)的行為。理想情況下，智體應(yīng)該能夠理解和利用這些通知指令，以實(shí)現(xiàn)更出色的性能，使LangAuto-通知 track成為LangAuto基準(zhǔn)中的一個(gè)關(guān)鍵要素。

LangAuto-序貫 track的模擬與實(shí)際應(yīng)用

LangAuto-序貫 track通過將連續(xù)的2到3條指令合并為一條長指令，模擬了來自乘客或?qū)Ш杰浖亩嗾Z句指令。這種設(shè)置更加貼近實(shí)際駕駛場景中復(fù)雜指令的表達(dá)方式，為自動(dòng)駕駛系統(tǒng)提供了更嚴(yán)格的測試。在面對(duì)這樣的挑戰(zhàn)時(shí)，智體需要具備更強(qiáng)大的上下文理解和執(zhí)行能力，使LangAuto-序貫 track成為LangAuto基準(zhǔn)中的又一重要組成部分。

通過LangAuto基準(zhǔn)的綜合測試，我們可以更全面地評(píng)估自動(dòng)駕駛系統(tǒng)在語言引導(dǎo)下的閉環(huán)駕駛性能，為未來自動(dòng)駕駛技術(shù)的發(fā)展提供有力支持。LangAuto基準(zhǔn)的引入不僅推動(dòng)了評(píng)估方法的創(chuàng)新，也為自動(dòng)駕駛系統(tǒng)的研發(fā)和部署提供了更高標(biāo)準(zhǔn)的參照。