無(wú)圖NOA的靈魂!盤(pán)一盤(pán)高精地圖的全流程構(gòu)建
本文經(jīng)自動(dòng)駕駛之心公眾號(hào)授權(quán)轉(zhuǎn)載,轉(zhuǎn)載請(qǐng)聯(lián)系出處。
寫(xiě)在前面&筆者的個(gè)人理解
近幾十年來(lái),電動(dòng)汽車(chē)行業(yè)經(jīng)歷了顯著的增長(zhǎng),主要關(guān)注自動(dòng)駕駛技術(shù)的進(jìn)步。盡管自動(dòng)駕駛?cè)匀环脚d未艾,但在可預(yù)見(jiàn)的未來(lái)實(shí)現(xiàn)全自動(dòng)汽車(chē)的前景推動(dòng)下,它已經(jīng)引起了人們的極大研究興趣。高精(HD)地圖是這一終點(diǎn)的核心,在繪制環(huán)境圖時(shí)提供厘米級(jí)的精度,并實(shí)現(xiàn)精確定位。與傳統(tǒng)地圖不同,這些高精的高精地圖對(duì)于自動(dòng)駕駛汽車(chē)的決策至關(guān)重要,確保了安全準(zhǔn)確的導(dǎo)航。高精地圖在測(cè)試前編制并定期更新,通過(guò)各種方法精心捕捉環(huán)境數(shù)據(jù)。這項(xiàng)研究探討了高精地圖在自動(dòng)駕駛中的重要作用,深入研究了它們的創(chuàng)建、更新過(guò)程,以及在這個(gè)快速發(fā)展的領(lǐng)域面臨的挑戰(zhàn)和未來(lái)方向。
高精地圖基礎(chǔ)知識(shí)
自動(dòng)駕駛汽車(chē)(AV)需要高度精確的地圖來(lái)導(dǎo)航道路和車(chē)道。常規(guī)數(shù)字地圖不適用于AVs,因?yàn)樗鼈內(nèi)狈τ嘘P(guān)紅綠燈和標(biāo)志、交通車(chē)道、桿狀物體的高度以及曲線(xiàn)的準(zhǔn)確大小的信息。這些地圖是專(zhuān)門(mén)為人類(lèi)使用而設(shè)計(jì)的,不能用于AV定位,因?yàn)檐?chē)輛本身需要了解地圖并定位其相對(duì)于周?chē)h(huán)境的位置。
盡管高精地圖至關(guān)重要,但自動(dòng)駕駛行業(yè)并沒(méi)有唯一的標(biāo)準(zhǔn)高精地圖結(jié)構(gòu)。不同的公司采用不同的架構(gòu)和方法來(lái)創(chuàng)建高精地圖,凸顯了缺乏統(tǒng)一的方法。谷歌的Waymo是自動(dòng)駕駛出租車(chē)的領(lǐng)導(dǎo)者,它使用高分辨率傳感器,但具體的高精地圖層還不為人所知。百度的開(kāi)源Apollo平臺(tái)通過(guò)不斷增強(qiáng)其地圖技術(shù)并集成激光雷達(dá)和4D毫米波雷達(dá)等先進(jìn)傳感器,支持精確定位、精確路徑規(guī)劃和實(shí)時(shí)更新,以在不同的環(huán)境中導(dǎo)航。
然而,我們可以查看一些可用的體系結(jié)構(gòu),以了解行業(yè)中的常見(jiàn)做法。HERE、TomTom和BerthaDerive(Lanelet)的高精地圖共享類(lèi)似的三層架構(gòu),但每層的功能略有不同。圖1顯示了來(lái)自HERE的高精地圖示例,圖2顯示了HERE的HD地圖定位層車(chē)道數(shù)據(jù)。Lyft Level 5有一個(gè)不同的高精地圖結(jié)構(gòu),有五層。這些體系結(jié)構(gòu)之間的比較如表1所示。盡管不同的公司有自己的高精地圖結(jié)構(gòu),但在本文中,我們重點(diǎn)關(guān)注自動(dòng)駕駛系統(tǒng)使用的地圖信息的主要類(lèi)別:拓?fù)洹缀?、語(yǔ)義和動(dòng)態(tài)元素/實(shí)時(shí)更新以及基于特征的層。
Topological Representation
高精道路地圖的基本組成部分是表示道路網(wǎng)絡(luò)的拓?fù)浣Y(jié)構(gòu)。在高精地圖中,拓?fù)浣Y(jié)構(gòu)捕捉道路、車(chē)道、十字路口和其他特征的連接方式。這種拓?fù)湫畔⒉粌H有利于高精地圖自主駕駛,而且有助于基于交通速度、道路質(zhì)量、交通延誤和交通規(guī)則等因素進(jìn)行路線(xiàn)優(yōu)化。拓?fù)浔硎就ǔ0ü?jié)點(diǎn)和邊,其中節(jié)點(diǎn)表示交叉口、互通式立交或特定興趣點(diǎn),而邊表示連接這些節(jié)點(diǎn)的路段。邊緣通常與道路分類(lèi)、速度限制和轉(zhuǎn)彎限制等屬性相關(guān)聯(lián)。它們?yōu)槁窂揭?guī)劃和決策提供了寶貴的背景。通過(guò)準(zhǔn)確捕捉道路網(wǎng)絡(luò)內(nèi)復(fù)雜的關(guān)系和互連,高精地圖的拓?fù)浔硎驹趯?shí)現(xiàn)安全高效的自動(dòng)駕駛以及促進(jìn)智能交通系統(tǒng)和車(chē)隊(duì)管理等先進(jìn)應(yīng)用方面發(fā)揮著至關(guān)重要的作用。
Geometric Representation
高精地圖中特征和對(duì)象的準(zhǔn)確表示是另一項(xiàng)關(guān)鍵任務(wù)。高精地圖的幾何表示是指如何在數(shù)字地圖數(shù)據(jù)中捕捉和表示環(huán)境的空間特征和布局。幾何特征包括道路、車(chē)道、人行道、建筑物和地形的形狀和位置。這些特征通常使用矢量數(shù)據(jù)結(jié)構(gòu)來(lái)表示,矢量數(shù)據(jù)結(jié)構(gòu)描述簡(jiǎn)化的幾何形狀,如點(diǎn)、線(xiàn)、曲線(xiàn)、圓和多邊形。幾何表示層的一個(gè)顯著示例是Lyft Level 5幾何地圖,該地圖包含關(guān)于環(huán)境的高度詳細(xì)的3D信息,組織起來(lái)以支持精確的計(jì)算和模擬。這種詳細(xì)程度對(duì)于實(shí)現(xiàn)AV的精確定位、路徑規(guī)劃和決策至關(guān)重要。
Semantic Representation
HD地圖的語(yǔ)義表示建立在幾何和拓?fù)浔硎镜幕A(chǔ)上,為特征提供“語(yǔ)義”。語(yǔ)義表示包括各種2D和3D交通對(duì)象,如車(chē)道邊界、十字路口、人行橫道、停車(chē)位、停車(chē)標(biāo)志、紅綠燈、道路限速、車(chē)道信息和道路分類(lèi)。這種語(yǔ)義理解對(duì)于自動(dòng)駕駛至關(guān)重要,在自動(dòng)駕駛中,車(chē)輛需要包圍周?chē)h(huán)境,以做出智能、安全和有序的決策。語(yǔ)義表示是原始幾何數(shù)據(jù)與智能決策和路徑規(guī)劃所需的更高層次理解之間的橋梁。通過(guò)為幾何特征分配語(yǔ)義標(biāo)簽和屬性,它使自動(dòng)駕駛汽車(chē)能夠以更有意義和上下文的方式解釋環(huán)境。語(yǔ)義表示層的顯著示例包括來(lái)自HERE的HD地圖定位模型層和來(lái)自TomTom的RoadDNA層。這些層包含對(duì)象級(jí)語(yǔ)義特征,有助于使用對(duì)象位置和上下文信息準(zhǔn)確估計(jì)車(chē)輛的位置。一般來(lái)說(shuō),語(yǔ)義表示為幾何表示中定義的道路特征和對(duì)象分配語(yǔ)義標(biāo)簽和屬性,為自動(dòng)駕駛系統(tǒng)提供更豐富、更全面的環(huán)境理解。
Dynamic Elements
動(dòng)態(tài)元素是環(huán)境中容易隨時(shí)間變化的特征、對(duì)象或條件。這些功能需要持續(xù)監(jiān)測(cè)和更新,為自動(dòng)駕駛汽車(chē)提供最新信息。行人、障礙物和車(chē)輛等動(dòng)態(tài)元素需要更新,以便高精地圖始終精確無(wú)誤。HD地圖的動(dòng)態(tài)元素層捕捉并表示環(huán)境的這些時(shí)變方面,這些方面對(duì)于安全高效的路徑規(guī)劃和決策至關(guān)重要。該層包括交通條件、施工區(qū)域、臨時(shí)道路封閉以及其他道路使用者(如車(chē)輛、行人和騎自行車(chē)的人)的位置和移動(dòng)等特征。動(dòng)態(tài)元素的準(zhǔn)確表示和頻繁更新對(duì)于自動(dòng)駕駛汽車(chē)及時(shí)預(yù)測(cè)和應(yīng)對(duì)不斷變化的情況至關(guān)重要。這些信息可以與高精地圖的靜態(tài)元素相結(jié)合,如道路幾何形狀和交通規(guī)則,以實(shí)現(xiàn)更全面、更可靠的路徑規(guī)劃和決策。對(duì)動(dòng)態(tài)元素的適當(dāng)管理,將在第4節(jié)中深入解釋?zhuān)瑢?duì)于規(guī)劃自動(dòng)駕駛汽車(chē)在動(dòng)態(tài)和復(fù)雜環(huán)境中的安全高效路徑至關(guān)重要。
Feature-Based Map Layers
高精地圖在很大程度上依賴(lài)于先進(jìn)的基于特征的地圖層來(lái)實(shí)現(xiàn)準(zhǔn)確的定位和導(dǎo)航。這些層使用各種技術(shù)來(lái)識(shí)別和匹配環(huán)境中的特征,以確保精確的車(chē)輛定位。在基于特征的映射中,一種最先進(jìn)的方法是視覺(jué)位置識(shí)別(VPR)。VPR的最新進(jìn)展,如SeqNet,通過(guò)學(xué)習(xí)強(qiáng)大的視覺(jué)特征和采用順序匹配過(guò)程,提高了性能。
另一個(gè)重大進(jìn)展是使用3D激光雷達(dá)地圖進(jìn)行車(chē)輛定位。SeqPolar方法引入了偏振激光雷達(dá)圖(PLM)和用于圖匹配的二階隱馬爾可夫模型(HMM2),該模型提供了3D激光雷達(dá)云的簡(jiǎn)潔和結(jié)構(gòu)化表示。該方法顯著提高了定位精度。
將這些技術(shù)集成到高精地圖系統(tǒng)中,顯著提高了基于特征的地圖層的準(zhǔn)確性和可靠性,這對(duì)于提高自動(dòng)駕駛汽車(chē)的定位和導(dǎo)航能力至關(guān)重要,尤其是在動(dòng)態(tài)和復(fù)雜環(huán)境中。
在自動(dòng)駕駛行業(yè),除了層次結(jié)構(gòu),還應(yīng)該考慮格式。表2總結(jié)了主要的高精地圖格式及其各自的表示。
一種常見(jiàn)的格式是Lanelet2,它源自liblanelet。它使用基于XML的OSM格式,并將映射組織為三層:物理層(物理元素的點(diǎn)和字符串)、關(guān)系層(平面元素、區(qū)域和管理元素)和拓?fù)鋵印anelet2專(zhuān)注于精確的車(chē)道級(jí)導(dǎo)航和交通管制。
另一種常見(jiàn)的格式是ASAM的OpenDRIVE。它使用XML格式來(lái)描述具有三層的道路網(wǎng)絡(luò):參考線(xiàn)(道路形狀的幾何圖元)、車(chē)道(可行駛路徑)和特征(交通信號(hào)和標(biāo)志)。OpenDRIVE強(qiáng)調(diào)靜態(tài)地圖功能和道路結(jié)構(gòu)。
百度旗下的Apollo OpenDRIVE使用了經(jīng)過(guò)修改的OpenDRIVE格式。Apollo框架是一個(gè)開(kāi)源項(xiàng)目,由總部位于中國(guó)的百度公司開(kāi)發(fā)。Apollo使用點(diǎn),與使用幾何圖元的原始OpenDRIVE格式形成對(duì)比。
高精地圖生成技術(shù)
如前幾節(jié)所述,高精地圖需要高精度才能有效實(shí)現(xiàn)自動(dòng)駕駛。最初,高精地圖是離線(xiàn)生成的;然而,為了確保它們的相關(guān)性和準(zhǔn)確性,一旦創(chuàng)建,就必須進(jìn)行實(shí)時(shí)更新。本節(jié)將討論生成高精地圖的一般步驟。該過(guò)程包括從多個(gè)來(lái)源收集數(shù)據(jù)、傳感器融合、點(diǎn)云配準(zhǔn)和特征提取。
Data Collection
高精地圖生成過(guò)程的第一步是數(shù)據(jù)收集。一輛裝有高精度和校準(zhǔn)良好的傳感器的車(chē)輛被派去調(diào)查和收集有關(guān)環(huán)境的全面數(shù)據(jù)。測(cè)繪車(chē)輛配備有移動(dòng)測(cè)繪系統(tǒng)(MMS),該系統(tǒng)通常包括各種傳感器。MMS設(shè)置中使用的傳感器可能會(huì)根據(jù)映射所需的要求和細(xì)節(jié)而有所不同。激光雷達(dá)是MMS中常用的傳感器之一。激光雷達(dá)傳感器提供環(huán)境的高度精確的3D點(diǎn)云數(shù)據(jù)。除了激光雷達(dá),相機(jī)還用于捕捉周?chē)h(huán)境的高分辨率圖像。這些高分辨率圖像提供了有關(guān)道路標(biāo)線(xiàn)、交通標(biāo)志和其他特征的附加信息。全球?qū)Ш叫l(wèi)星系統(tǒng)(GNSS)是MMS中的另一種常見(jiàn)傳感器。全球?qū)Ш叫l(wèi)星系統(tǒng)接收器能夠同時(shí)接收來(lái)自多個(gè)衛(wèi)星星座的信號(hào),這提高了精度和精度。GNSS傳感器通常與慣性測(cè)量單元(IMU)傳感器耦合,以幫助估計(jì)車(chē)輛的運(yùn)動(dòng),包括位置、速度和方向。此外,雷達(dá)傳感器可用于探測(cè)和跟蹤移動(dòng)物體。里程表傳感器也可用于測(cè)量車(chē)輪行駛的距離。根據(jù)測(cè)繪任務(wù)的具體需要,可以配備其他傳感器。上述傳感器也可以單獨(dú)購(gòu)買(mǎi)并配置用于進(jìn)行數(shù)據(jù)收集。然而,這種方法可能并不簡(jiǎn)單,而且也是一項(xiàng)耗時(shí)的任務(wù)。配備激光雷達(dá)、全球?qū)Ш叫l(wèi)星系統(tǒng)、IMU和相機(jī)的MMS如圖3所示。
通常,有三種主要方法用于收集高精地圖的數(shù)據(jù)。表3對(duì)這些方法進(jìn)行了比較。第一個(gè)涉及從公開(kāi)的數(shù)據(jù)集中獲取數(shù)據(jù);然而,對(duì)于自動(dòng)駕駛來(lái)說(shuō),這些并沒(méi)有那么多。毫無(wú)疑問(wèn),研究人員可以利用少數(shù)數(shù)據(jù)集,如Level5 Lyft數(shù)據(jù)集、KITTI數(shù)據(jù)集、nuScenes數(shù)據(jù)集和Argovere數(shù)據(jù)集。這些開(kāi)源數(shù)據(jù)集包含預(yù)先標(biāo)記的交通數(shù)據(jù)、3D點(diǎn)云、圖像和其他傳感器數(shù)據(jù),便于實(shí)驗(yàn)和地圖生成。第二種方法首先包含數(shù)據(jù)收集。研究人員在關(guān)注高精地圖中的特定區(qū)域或特征時(shí),可能會(huì)選擇這種方法,盡管由此產(chǎn)生的數(shù)據(jù)集往往在地理上受到限制。最后,將眾包緊急情況作為強(qiáng)有力的第三種選擇。該方法利用大量工具的貢獻(xiàn),產(chǎn)生覆蓋廣泛領(lǐng)域的固定和各種數(shù)據(jù)集。此外,眾包數(shù)據(jù)的集體性質(zhì)涵蓋了廣泛的場(chǎng)景,為AV可能遇到的挑戰(zhàn)提供了寶貴的見(jiàn)解。例如,最近的研究提出了一種眾包框架,用于持續(xù)更新高精地圖的點(diǎn)云地圖(PCM),集成激光雷達(dá)和車(chē)輛通信技術(shù),實(shí)時(shí)檢測(cè)和整合環(huán)境變化。
Sensor Fusion
傳感器融合通過(guò)組合來(lái)自多個(gè)傳感器的數(shù)據(jù)來(lái)創(chuàng)建可靠準(zhǔn)確的高精地圖,在高精地圖生成中發(fā)揮著重要作用。傳感器融合集成了來(lái)自多個(gè)傳感器的數(shù)據(jù),如激光雷達(dá)、相機(jī)、IMU、GPS和雷達(dá),以捕捉環(huán)境的各個(gè)方面。它利用來(lái)自各種傳感模式的數(shù)據(jù)來(lái)最大限度地減少檢測(cè)的不確定性,并解決獨(dú)立運(yùn)行的單個(gè)傳感器的局限性。表4基于自動(dòng)駕駛中要考慮的各種因素,對(duì)激光雷達(dá)、攝像頭和雷達(dá)傳感器進(jìn)行了比較。
集成多個(gè)傳感器以提供冗余并實(shí)現(xiàn)更準(zhǔn)確的高精地圖需要仔細(xì)校準(zhǔn)傳感器。廣泛用于自動(dòng)駕駛的傳感器組合基于激光雷達(dá)、攝像頭和雷達(dá)。盡管存在其他傳感器集成,但更廣泛研究的組合是這三種傳感器。這些廣泛使用的傳感器組合是激光雷達(dá)-相機(jī)-雷達(dá)、激光雷達(dá)-相機(jī)和相機(jī)-雷達(dá)。
激光雷達(dá)和相機(jī)傳感器的融合產(chǎn)生了高分辨率的圖像和更高的測(cè)距精度。激光雷達(dá)-相機(jī)融合已被證明比單獨(dú)使用這些傳感器表現(xiàn)出更好的性能。用于耦合這兩個(gè)傳感器的一種方法是將來(lái)自激光雷達(dá)的點(diǎn)云數(shù)據(jù)投影到從相機(jī)傳感器獲得的圖像上。另一種實(shí)現(xiàn)激光雷達(dá)-相機(jī)融合的方法是將相機(jī)傳感器的2D檢測(cè)構(gòu)建到激光雷達(dá)點(diǎn)云數(shù)據(jù)中,如FrustrumNet所示。如圖4所示,F(xiàn)rustrumNet的架構(gòu)涉及將相機(jī)的2D對(duì)象檢測(cè)投影到激光雷達(dá)點(diǎn)云中的3D FrustrumNet候選者中。這種互補(bǔ)傳感器數(shù)據(jù)的融合利用了兩種模式的優(yōu)勢(shì),增強(qiáng)了自動(dòng)駕駛應(yīng)用中感知的穩(wěn)健性和準(zhǔn)確性。
如LRVFNet中所述,使用激光雷達(dá)-相機(jī)-雷達(dá)融合涉及使用基于深度多尺度注意力的架構(gòu)從各種傳感器模態(tài)(激光雷達(dá)、毫米波雷達(dá)和視覺(jué)傳感器)生成不同的特征。這種融合方法有效地集成了來(lái)自這些模態(tài)的互補(bǔ)信息,以提高目標(biāo)檢測(cè)的準(zhǔn)確性和魯棒性。類(lèi)似地,CLR-BNN中使用的融合機(jī)制使用貝葉斯神經(jīng)網(wǎng)絡(luò)來(lái)融合來(lái)自三個(gè)傳感器的數(shù)據(jù)。這種方法提高了檢測(cè)精度,并減少了各種駕駛情況下的不確定性。圖5展示了CLR-BNN的高級(jí)體系結(jié)構(gòu)。
相機(jī)-雷達(dá)傳感器的集成為AVs提供了顯著的優(yōu)勢(shì),因?yàn)樗Y(jié)合了來(lái)自相機(jī)的高分辨率視覺(jué)數(shù)據(jù),捕捉復(fù)雜的環(huán)境細(xì)節(jié),如顏色、紋理和形狀,以及雷達(dá)傳感器的遠(yuǎn)程檢測(cè)能力,即使在具有挑戰(zhàn)性的天氣條件和低能見(jiàn)度的情況下也能可靠地工作。圖6所示的CameraRadarFusionNet(CRF-Net)通過(guò)在網(wǎng)絡(luò)層內(nèi)集成相機(jī)數(shù)據(jù)和稀疏雷達(dá)數(shù)據(jù)來(lái)增強(qiáng)2D對(duì)象檢測(cè)網(wǎng)絡(luò),這自主決定了最佳融合水平,在各種數(shù)據(jù)集上優(yōu)于純圖像網(wǎng)絡(luò)。
傳感器融合通過(guò)早期、中期或后期融合策略集成來(lái)自各種傳感器的數(shù)據(jù)。當(dāng)集成發(fā)生時(shí),這些方法會(huì)有所不同:在處理之前(早期)、在特征級(jí)別(中期)或在決策級(jí)別(后期)。圖7顯示了這三種融合策略的基本工作原理。
用于實(shí)現(xiàn)傳感器融合策略的最廣泛采用的算法包括用于相機(jī)數(shù)據(jù)的對(duì)象檢測(cè)技術(shù),如YOLO和SSD,以及用于處理來(lái)自激光雷達(dá)或雷達(dá)傳感器的點(diǎn)云數(shù)據(jù)的3D對(duì)象檢測(cè)方法,如VoxelNet和PointNet。
地圖生成算法
在高精地圖生成技術(shù)中,本節(jié)專(zhuān)門(mén)介紹地圖生成過(guò)程中使用的算法節(jié)奏。本節(jié)重點(diǎn)介紹用于處理傳感器數(shù)據(jù)和構(gòu)建環(huán)境高精地圖的方法和技術(shù)。
點(diǎn)云配準(zhǔn)方法
算法在將原始傳感器數(shù)據(jù)轉(zhuǎn)換為有意義的地圖表示方面發(fā)揮著關(guān)鍵作用。在數(shù)據(jù)收集之后,非常強(qiáng)大的算法對(duì)于生成高精地圖至關(guān)重要。執(zhí)行稱(chēng)為點(diǎn)云配準(zhǔn)的過(guò)程,以對(duì)齊從數(shù)據(jù)收集階段獲得的幾個(gè)重疊和非重疊的點(diǎn)云數(shù)據(jù)。從不同傳感器收集的點(diǎn)云數(shù)據(jù)需要對(duì)齊,以獲得環(huán)境的全面地圖。需要進(jìn)行的對(duì)準(zhǔn)可能不一定來(lái)自不同的傳感器。這意味著我們可以從同一傳感器獲得不同時(shí)間的點(diǎn)云數(shù)據(jù),也可以從不同的角度獲得數(shù)據(jù)。因此,該條件還需要點(diǎn)云配準(zhǔn)來(lái)對(duì)齊所獲取的點(diǎn)云。
通常,有四種技術(shù)用于執(zhí)行點(diǎn)云配準(zhǔn):基于優(yōu)化的方法、基于概率的方法、以特征為基礎(chǔ)的方法和深度學(xué)習(xí)技術(shù)。表5對(duì)這些方法進(jìn)行了比較和對(duì)比。
盡管用于點(diǎn)云配準(zhǔn)的算法已經(jīng)取得了重大進(jìn)展,但仍存在一些挑戰(zhàn)和局限性,阻礙了這些技術(shù)的廣泛采用。最突出的挑戰(zhàn)如下:
- 從傳感器收集的點(diǎn)云數(shù)據(jù)通常包含異常值、噪聲和缺失數(shù)據(jù),這可能會(huì)影響配準(zhǔn)過(guò)程。
- 點(diǎn)云配準(zhǔn)算法通常涉及計(jì)算密集型操作,并且需要大量的計(jì)算資源,例如內(nèi)存和處理能力。
- 在點(diǎn)云不重疊或重疊有限的情況下,配準(zhǔn)過(guò)程很難找到對(duì)應(yīng)關(guān)系并可視化環(huán)境。
- 傳感器的不精確標(biāo)定也可能被引入配準(zhǔn)過(guò)程。需要對(duì)數(shù)據(jù)收集中涉及的傳感器進(jìn)行適當(dāng)校準(zhǔn),以提高準(zhǔn)確性。
- 點(diǎn)云中的密度差異可能是由于傳感器差異造成的,也可能是場(chǎng)景的不同區(qū)域之間存在差異。例如,在點(diǎn)云稀疏的區(qū)域中,可能很難找到點(diǎn)之間的對(duì)應(yīng)關(guān)系,從而導(dǎo)致點(diǎn)云配準(zhǔn)中的錯(cuò)誤。
高精地圖的特征提取
在點(diǎn)云配準(zhǔn)過(guò)程之后,特征提取成為生成信息豐富、高質(zhì)量的高精地圖的關(guān)鍵組成部分,以便在各種環(huán)境中可靠使用。特征提取包括從傳感器數(shù)據(jù)中識(shí)別和提取相關(guān)特征,以創(chuàng)建環(huán)境的詳細(xì)表示。特征是指從傳感器數(shù)據(jù)中提取并用于創(chuàng)建周?chē)h(huán)境的詳細(xì)表示的環(huán)境的不同元素。這些特征為導(dǎo)航、車(chē)輛定位以及AV和系統(tǒng)中的各種其他應(yīng)用提供了有價(jià)值的信息。高精地圖中的一些常見(jiàn)特征包括道路和車(chē)道標(biāo)記、道路網(wǎng)絡(luò)、交通標(biāo)志、地標(biāo)和桿狀物體。傳統(tǒng)上,特征提取是手動(dòng)完成的,由人工操作員識(shí)別和注釋傳感器數(shù)據(jù)中感興趣的特征。這一過(guò)程不具有成本效益,而且是一項(xiàng)耗時(shí)的任務(wù)。最近,機(jī)器學(xué)習(xí)方法,特別是深度學(xué)習(xí)技術(shù),已被用于從點(diǎn)云數(shù)據(jù)中自動(dòng)提取特征。
已經(jīng)提出了幾種深度學(xué)習(xí)方法來(lái)提取特定特征,例如車(chē)道標(biāo)線(xiàn)。LMPNet基于特征金字塔網(wǎng)絡(luò)(FPN)提出了一種提取圖像中車(chē)道標(biāo)記的方法,然后根據(jù)位置數(shù)據(jù)將圖像從透視空間投影到三維空間中。其中EL-GAN使用生成反向網(wǎng)絡(luò)(GANs)進(jìn)行特征提取。DAGMapper使用有向無(wú)環(huán)圖形模型(DAG)內(nèi)的推理,集成深度神經(jīng)網(wǎng)絡(luò)以獲得條件概率,并使用貪婪算法進(jìn)行圖形估計(jì)。圖9顯示了道路網(wǎng)絡(luò)提取方法。
更新高精地圖
Importance of Regular Updates
要確保AV導(dǎo)航準(zhǔn)確可靠,需要定期更新高精地圖。隨著AV在各種環(huán)境中導(dǎo)航,道路基礎(chǔ)設(shè)施的修改、交通模式的變化以及道路封閉、建筑工地和事故等動(dòng)態(tài)事件等變化是不可避免的。定期更新高精地圖對(duì)于反映這些變化并支持安全高效的導(dǎo)航策略至關(guān)重要。
此外,頻繁的地圖更新在提高路線(xiàn)規(guī)劃能力的質(zhì)量方面發(fā)揮著至關(guān)重要的作用。通過(guò)整合有關(guān)道路狀況、交通模式和潛在中斷的最新信息,AV可以動(dòng)態(tài)調(diào)整其計(jì)劃路線(xiàn),從而對(duì)動(dòng)態(tài)事件做出及時(shí)響應(yīng)。這種適應(yīng)性不僅優(yōu)化了導(dǎo)航效率,而且通過(guò)考慮環(huán)境的實(shí)時(shí)變化,有助于提高安全性。因此,通過(guò)定期更新來(lái)維護(hù)最新的高精地圖是自動(dòng)駕駛汽車(chē)運(yùn)營(yíng)的一個(gè)關(guān)鍵方面,確保導(dǎo)航系統(tǒng)能夠獲得最準(zhǔn)確和最新的信息,從而實(shí)現(xiàn)知情決策和無(wú)縫適應(yīng)不斷變化的道路網(wǎng)絡(luò)條件。
Real-Time Data Sources
實(shí)時(shí)數(shù)據(jù)源為更新高精地圖提供了關(guān)鍵信息。這些來(lái)源包括車(chē)輛傳感器,如攝像頭、激光雷達(dá)和雷達(dá),它們實(shí)時(shí)捕捉周?chē)h(huán)境的數(shù)據(jù)。此外,連接的車(chē)輛(車(chē)對(duì)車(chē)(V2V))和基礎(chǔ)設(shè)施(車(chē)對(duì)基礎(chǔ)設(shè)施(V2I)),如交通監(jiān)測(cè)系統(tǒng)和道路傳感器,有助于實(shí)時(shí)數(shù)據(jù)收集。其他來(lái)源,如導(dǎo)航應(yīng)用程序和社交媒體的眾包數(shù)據(jù),如果來(lái)源可靠,可以為交通狀況和道路事故提供有價(jià)值的見(jiàn)解。
自動(dòng)更新過(guò)程
了確保高精地圖的高效和準(zhǔn)確更新,已采用自動(dòng)化流程來(lái)簡(jiǎn)化實(shí)時(shí)數(shù)據(jù)流與地圖數(shù)據(jù)庫(kù)的集成。這些過(guò)程利用算法檢測(cè)變化并將其納入地圖,減少了手動(dòng)干預(yù)的需要,并將錯(cuò)誤風(fēng)險(xiǎn)降至最低。近年來(lái),深度學(xué)習(xí)技術(shù)已成為自動(dòng)化檢測(cè)要集成到高精地圖更新中的變化的強(qiáng)大工具。在一篇綜合調(diào)查論文[6]中,概述了自動(dòng)地圖更新過(guò)程中使用的各種方法,包括基于概率和幾何的方法??柭交虳empster–Shafer的信念理論等技術(shù)利用概率模型將不確定性和信念系統(tǒng)納入更新過(guò)程?;趲缀蔚姆椒ㄒ蕾?lài)于幾何計(jì)算和分析來(lái)檢測(cè)和整合環(huán)境的變化,補(bǔ)充深度學(xué)習(xí)技術(shù)。通過(guò)利用這些自動(dòng)化技術(shù),高精地圖可以保持最新信息的更新,以最少的手動(dòng)工作量反映環(huán)境的變化。這種自動(dòng)化不僅提高了更新過(guò)程的效率,還提高了高精地圖的整體準(zhǔn)確性和可靠性,確保了AV的無(wú)縫安全導(dǎo)航。
SLAM算法是高精地圖自動(dòng)更新過(guò)程中的另一個(gè)關(guān)鍵組成部分。SLAM技術(shù)使AV能夠生成和維護(hù)其環(huán)境的地圖,同時(shí)確定其在映射的環(huán)境內(nèi)的位置。當(dāng)車(chē)輛在動(dòng)態(tài)環(huán)境中導(dǎo)航時(shí),這種功能對(duì)于實(shí)時(shí)更新高精地圖特別有價(jià)值?;诩す饫走_(dá)的SLAM算法,如LOAM(激光雷達(dá)里程計(jì)和地圖)、LeGO LOAM和SuMa++,利用來(lái)自激光雷達(dá)傳感器的點(diǎn)云數(shù)據(jù)來(lái)同時(shí)估計(jì)車(chē)輛的姿態(tài)并創(chuàng)建環(huán)境的3D地圖。這些算法可以檢測(cè)周?chē)h(huán)境的變化,如新建筑、障礙物或道路變化,并自動(dòng)將這些更新納入高精地圖。視覺(jué)SLAM技術(shù),如ORB-SLAM和DSO(直接稀疏里程計(jì)),利用視覺(jué)里程計(jì)進(jìn)行定位和映射。通過(guò)分析視覺(jué)數(shù)據(jù)和檢測(cè)環(huán)境的變化,這些算法可以用新的或修改的特征更新HD地圖,例如道路標(biāo)記、交通標(biāo)志或地標(biāo)。此外,結(jié)合來(lái)自激光雷達(dá)、相機(jī)、IMU和其他傳感器的數(shù)據(jù)的多傳感器融合方法已被開(kāi)發(fā)用于基于SLAM的高精地圖更新。示例包括LIO-SAM、R3 Live、FAST-LIVO、FAST-LIO和FAST-LIO2,它們利用不同傳感器模式的互補(bǔ)優(yōu)勢(shì)進(jìn)行穩(wěn)健和電池電量圖更新。通過(guò)將SLAM算法集成到自動(dòng)更新過(guò)程中,高精地圖可以持續(xù)適應(yīng)環(huán)境的動(dòng)態(tài)變化,確保自動(dòng)駕駛汽車(chē)導(dǎo)航的最新可靠信息。
挑戰(zhàn)和解決方案
Environmental Challenges
雖然保持高精地圖的準(zhǔn)確性有助于減輕環(huán)境挑戰(zhàn)的影響,但保持準(zhǔn)確的高精地圖并確保其在所有環(huán)境條件下可靠運(yùn)行是一項(xiàng)重大挑戰(zhàn)。處理施工區(qū)域、在惡劣天氣條件下可靠形成以及有效繪制復(fù)雜的城市景觀需要不斷更新和大量預(yù)算投資。
Technical Challenges
可普遍擴(kuò)展的高精地圖對(duì)于任何城市、地區(qū)或道路的高效自動(dòng)駕駛系統(tǒng)都至關(guān)重要。然而,由于不同地區(qū)的交通規(guī)則、標(biāo)志和道路幾何形狀等因素,難以實(shí)現(xiàn)可擴(kuò)展性。需要更有效的映射算法來(lái)處理這些差異。此外,高精地圖缺乏標(biāo)準(zhǔn)化也是一個(gè)令人擔(dān)憂(yōu)的問(wèn)題。不同的公司使用專(zhuān)有格式,這使得數(shù)據(jù)交換和互操作性具有挑戰(zhàn)性。數(shù)據(jù)收集的復(fù)雜性是另一個(gè)技術(shù)障礙。在收集了數(shù)兆字節(jié)的數(shù)據(jù)后,僅需對(duì)其進(jìn)行一小時(shí)的預(yù)處理就需要強(qiáng)大的計(jì)算能力,尤其是在識(shí)別和分類(lèi)相關(guān)信息等任務(wù)中。最后,以最小的延遲向AV提供更新的地圖數(shù)據(jù)對(duì)于安全操作至關(guān)重要。這一點(diǎn)在互聯(lián)網(wǎng)基礎(chǔ)設(shè)施較差的地區(qū)尤為重要,因?yàn)榫W(wǎng)絡(luò)速度較慢可能會(huì)危及安全。
數(shù)據(jù)隱私和安全問(wèn)題
在技術(shù)和數(shù)據(jù)驅(qū)動(dòng)的時(shí)代,隱私至關(guān)重要。對(duì)于AD系統(tǒng),厘米級(jí)精度的要求需要記錄用戶(hù)的位置和移動(dòng)。這些信息可以用來(lái)提供服務(wù),如交通擁堵和道路堵塞的實(shí)時(shí)更新。如果處理不當(dāng),這些敏感數(shù)據(jù)永遠(yuǎn)不會(huì)被惡意利用。安全問(wèn)題不應(yīng)掉以輕心;高精地圖提供商必須在各個(gè)層面全面解決這一問(wèn)題。
未來(lái)方向
傳感器技術(shù)的進(jìn)展
盡管未來(lái)仍不確定,我們目前使用的技術(shù)最終可能會(huì)被取代,但現(xiàn)有傳感器技術(shù)的持續(xù)進(jìn)步,如激光雷達(dá)、相機(jī)、雷達(dá)和IMU,預(yù)計(jì)將在增強(qiáng)高精地圖創(chuàng)建和更新過(guò)程的能力方面發(fā)揮關(guān)鍵作用。新興的傳感器技術(shù),包括固態(tài)激光雷達(dá)、高分辨率相機(jī)和多模傳感器融合系統(tǒng),為捕捉和處理環(huán)境數(shù)據(jù)提供了更高的準(zhǔn)確性、可靠性和成本效益,進(jìn)一步推動(dòng)了穩(wěn)健和最新高精地圖的開(kāi)發(fā)。
5G與邊緣計(jì)算的實(shí)時(shí)更新集成
5G網(wǎng)絡(luò)和邊緣計(jì)算基礎(chǔ)設(shè)施的集成將促進(jìn)高精地圖數(shù)據(jù)的實(shí)時(shí)更新和無(wú)縫分發(fā)到車(chē)輛和其他連接設(shè)備。5G網(wǎng)絡(luò)提供的高帶寬和低延遲,加上路邊基礎(chǔ)設(shè)施和車(chē)載系統(tǒng)的邊緣計(jì)算能力,將實(shí)現(xiàn)動(dòng)態(tài)地圖更新、高效交通管理和增強(qiáng)AV的態(tài)勢(shì)感知。此外,隨著5G網(wǎng)絡(luò)在未來(lái)的普及,在網(wǎng)絡(luò)性能和計(jì)算能力的進(jìn)步的推動(dòng)下,高精地圖系統(tǒng)將受益于增強(qiáng)的穩(wěn)健性、可靠性和潛在的新功能。
AI在高精地圖創(chuàng)建和更新中的應(yīng)用
人工智能(AI)和機(jī)器學(xué)習(xí)(ML)算法將繼續(xù)在高精地圖生成和更新過(guò)程中發(fā)揮關(guān)鍵作用。深度學(xué)習(xí)、強(qiáng)化學(xué)習(xí)和生成逆向網(wǎng)絡(luò)(GANs)能夠從傳感器數(shù)據(jù)中實(shí)現(xiàn)自動(dòng)特征提取、異常檢測(cè)、變化檢測(cè)和預(yù)測(cè)建模。人工智能驅(qū)動(dòng)的方法簡(jiǎn)化了地圖創(chuàng)建工作流程,提高了準(zhǔn)確性,并更有效地適應(yīng)不斷變化的環(huán)境。
標(biāo)準(zhǔn)化高精地圖生態(tài)系統(tǒng)
目前,大多數(shù)參與廣告的公司都生產(chǎn)其專(zhuān)有的高精地圖。然而,行業(yè)利益相關(guān)者之間的合作,包括汽車(chē)制造商、技術(shù)公司、政府機(jī)構(gòu)和ASAM OpenDRIVE格式等標(biāo)準(zhǔn)組織,對(duì)于標(biāo)準(zhǔn)化高精地圖格式、數(shù)據(jù)交換協(xié)議和質(zhì)量保證流程至關(guān)重要。Lanelet2、Apollo(使用修改后的OpenDRIVE格式)和NDS(汽車(chē)地圖數(shù)據(jù)的全球標(biāo)準(zhǔn))代表著實(shí)現(xiàn)這一標(biāo)準(zhǔn)化的重要步驟。關(guān)鍵步驟包括促進(jìn)利益相關(guān)者之間的合作,采用OpenDRIVE、Lanelet2和NDS等既定格式以實(shí)現(xiàn)兼容性和互操作性,以及開(kāi)發(fā)統(tǒng)一規(guī)范。協(xié)調(diào)一致的標(biāo)準(zhǔn)化工作促進(jìn)了整個(gè)生態(tài)系統(tǒng)的無(wú)縫數(shù)據(jù)共享和創(chuàng)新,推動(dòng)了高精地圖創(chuàng)建、更新和各種應(yīng)用程序利用率的不斷提高。這種協(xié)作方式促進(jìn)了統(tǒng)一一致的高精地圖基礎(chǔ)設(shè)施,并加速了先進(jìn)自動(dòng)駕駛解決方案的開(kāi)發(fā)和部署,使整個(gè)行業(yè)受益。這些未來(lái)方向代表了高精地圖發(fā)展和進(jìn)步的持續(xù)趨勢(shì)和重點(diǎn)領(lǐng)域,有可能在未來(lái)幾年重塑未來(lái)交通、導(dǎo)航和城市流動(dòng)的格局。
可持續(xù)發(fā)展的自動(dòng)駕駛
自動(dòng)駕駛汽車(chē)的發(fā)展代表了促進(jìn)交通可持續(xù)性的關(guān)鍵機(jī)遇。AVs有潛力通過(guò)使用高精地圖優(yōu)化駕駛模式和最大限度地減少能源消耗,從而顯著減少溫室氣體排放。這些地圖提供了精確的地理數(shù)據(jù),使AV能夠高效導(dǎo)航,從而減少燃料使用和排放。研究表明,與傳統(tǒng)車(chē)輛相比,電動(dòng)汽車(chē)可以減少10-20%的油耗,尤其是在交通擁堵普遍的城市地區(qū)。此外,配備高精地圖的AV可以通過(guò)與基礎(chǔ)設(shè)施和其他車(chē)輛通信來(lái)增強(qiáng)交通流量,減少擁堵,改善整體空氣質(zhì)量。
自動(dòng)駕駛技術(shù)還通過(guò)促進(jìn)共享出行服務(wù)和潛在的車(chē)輛保有量減少來(lái)促進(jìn)可持續(xù)性。通過(guò)與拼車(chē)平臺(tái)集成,并基于高精地圖的實(shí)時(shí)數(shù)據(jù)優(yōu)化路線(xiàn),AV可以支持向共享出行模式的轉(zhuǎn)變,從而減少道路上的車(chē)輛數(shù)量,減少城市語(yǔ)音。此外,AV通過(guò)利用高精地圖進(jìn)行精確導(dǎo)航和障礙物檢測(cè),從而減少交通事故及其相關(guān)的環(huán)境和經(jīng)濟(jì)成本,從而有助于提高安全性。隨著城市和交通系統(tǒng)的發(fā)展,AV技術(shù)與高精地圖推動(dòng)的可持續(xù)城市規(guī)劃舉措的融合有望創(chuàng)造更高效、宜居和環(huán)保的城市環(huán)境。
結(jié)論
這項(xiàng)全面的調(diào)查強(qiáng)調(diào)了高精地圖在推動(dòng)自動(dòng)駕駛技術(shù)進(jìn)步方面的關(guān)鍵作用。它深入研究了高精地圖生成和維護(hù)的各個(gè)方面,探索了地圖層、數(shù)據(jù)收集方法、傳感器融合策略、點(diǎn)云配準(zhǔn)技術(shù)和特征提取過(guò)程的復(fù)雜性,這些都是創(chuàng)建詳細(xì)準(zhǔn)確的環(huán)境表示所必需的。此外,還強(qiáng)調(diào)了定期更新對(duì)確保高精地圖的流通性和可靠性的重要性。此外,這篇綜述解決了高精地圖開(kāi)發(fā)和維護(hù)中固有的挑戰(zhàn),同時(shí)也探索了潛在的解決方案和未來(lái)前景,有望提高高精地圖在推動(dòng)自動(dòng)駕駛系統(tǒng)發(fā)展方面的有效性和實(shí)用性。