0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

「微侃」城市輔助駕駛NGP中的BEV模型

汽車電子設(shè)計(jì) ? 來源:汽車電子設(shè)計(jì) ? 2023-04-16 09:20 ? 次閱讀

聚焦汽車科技,剖析產(chǎn)業(yè)趨勢(shì)和變革浪潮

今年年初我們?cè)凇吨档闷诖氖?a target="_blank">智能車技術(shù)盤點(diǎn)》中提到,去年,長(zhǎng)城旗下的毫末科技、小鵬、以及極狐已經(jīng)在做“城市輔助駕駛”,這個(gè)技術(shù)意味著汽車在城市道路上,也能實(shí)現(xiàn)被監(jiān)管的“自動(dòng)駕駛”。

相比以往的L2+級(jí)別的輔助駕駛,主要是在封閉道路使用,比如高架和高速公路上。城市路面上因?yàn)槁窙r更復(fù)雜,比如有紅綠燈需要識(shí)別并做出決策、道路線也并不連續(xù)、還有行人和非機(jī)動(dòng)車進(jìn)入機(jī)動(dòng)車的道路等等情況,所以自動(dòng)駕駛的實(shí)現(xiàn)有很大的難度。但一旦做成,的確能讓用戶省心不少。所以也被我們?cè)谀瓿醯臅r(shí)候,把城市輔助駕駛列為今年值得期待的十大智能車技術(shù)之一。

小鵬汽車自動(dòng)駕駛副總裁吳新宙也說“小鵬的XNGP是無人駕駛實(shí)現(xiàn)前,智能輔助駕駛的終極形態(tài)?!?/p>

Part 1

特斯拉在自動(dòng)駕駛軟件和算法上的創(chuàng)新

為什么城市輔助駕駛相比之前的輔助駕駛有了飛速提升,需要先介紹一下特斯拉的BEV鳥瞰圖和占有網(wǎng)絡(luò)模型。

◎BEV(Bird's-eye-view Perception)模型

特斯拉自動(dòng)輔助駕駛的軟件(Tesla Autopilot Software)從 2016 年開始上線1.0版本。到2019年,特斯拉開始用適量空間(Vector Space)的技術(shù)對(duì)道路線進(jìn)行識(shí)別,并且加入了BEV模型,又叫鳥瞰圖預(yù)測(cè)模型。

b7027272-dbeb-11ed-bfe3-dac502259ad0.png

2019-2020, 特斯拉系統(tǒng)性地導(dǎo)入vector space,并且導(dǎo)入了多視角攝像頭的3D目標(biāo)檢測(cè)在鳥瞰圖下的感知(BEV Perception) 。

b7225ace-dbeb-11ed-bfe3-dac502259ad0.jpg

BEV 是特斯拉自動(dòng)駕駛系統(tǒng)中的一種模型,是一種基于圖像的模型,用于將車輛周圍的環(huán)境信息轉(zhuǎn)換為平面圖。BEV 模型可以通過多個(gè)攝像頭捕捉到的圖像來生成車輛周圍的環(huán)境信息,然后將這些信息轉(zhuǎn)換為平面圖,以便自動(dòng)駕駛系統(tǒng)進(jìn)行處理和分析。

特斯拉采用 8 個(gè)攝像頭采集圖像進(jìn)行有效融合,通過校正后,一并輸入到神經(jīng)網(wǎng)絡(luò)。順便科普一下,神經(jīng)網(wǎng)絡(luò)就是通過一組算法模擬人腦,是一種稱為深度學(xué)習(xí)過程,還可以從錯(cuò)誤中不斷改進(jìn)。

在自動(dòng)駕駛中,神經(jīng)網(wǎng)絡(luò) 對(duì)采集到的圖像提取特征,進(jìn)行關(guān)聯(lián)后,投影到一個(gè)矢量空間,就可以實(shí)現(xiàn)反映周圍環(huán)境的鳥瞰圖BEV的效果。

b734ae68-dbeb-11ed-bfe3-dac502259ad0.jpg

鳥瞰圖能很好地還原周圍環(huán)境,提供自動(dòng)駕駛所需的2D 圖像信息,類似一張平面的地圖。雖然會(huì)缺失一些空間和高度上信息,無法真實(shí)地反映物體在 3D 空間實(shí)際占用的體積是多少。但在BEV模型中,特斯拉更關(guān)心的是那些靜止物體,例如路沿、車道線和柵欄等。

◎占用網(wǎng)絡(luò)模型(Occupancy Network)

占用網(wǎng)絡(luò)模型是將三維世界劃分為一個(gè)網(wǎng)格單元,定義哪個(gè)單元被占用,哪個(gè)單元是空閑的,還可以把當(dāng)前場(chǎng)景下被遮擋的靜止物體和動(dòng)態(tài)物體也用體積塊表示出來。通過占用網(wǎng)絡(luò),再結(jié)合BEV模型,特斯拉可以對(duì)路徑規(guī)劃有了更多信息。

Part 2

小鵬NGP

城市智能導(dǎo)航輔助駕駛

小鵬在迭代自動(dòng)輔助駕駛方面一直向特斯拉看齊,并且導(dǎo)入了自己的設(shè)計(jì)理念。在泊車、高精度定位和高精度地圖方面有自己的理解,并且率先導(dǎo)入了激光雷達(dá)。

小鵬XNGP智能輔助駕駛系統(tǒng),主要是基于純視覺感知的速度與預(yù)測(cè),更精準(zhǔn)地識(shí)別動(dòng)態(tài)物體速度和意圖,提升駕駛決策的博弈能?。計(jì)劃通過三個(gè)階段進(jìn)化成終極的無限接近“無人駕駛”的形態(tài)。

b767b4b6-dbeb-11ed-bfe3-dac502259ad0.png

今年3月底,小鵬汽車推送了Xmart OS 4.2.0,釋放XNGP第一階段能力:在G9及P7i Max版上,上海、深圳、廣州、等高精地圖覆蓋區(qū)域,可以開放點(diǎn)到點(diǎn)的城市智能導(dǎo)航輔助駕駛;在無高精地圖覆蓋區(qū)域,開放具備跨線繞行,識(shí)別紅綠燈并直行通過路口能力的LCC增強(qiáng)版。

從實(shí)際體驗(yàn)上來講,NGP之前的智能輔助駕駛,主要在有高精地圖的、工況簡(jiǎn)單的路段——主要是高速、高架等封閉路面——來實(shí)現(xiàn)的;在無高精地圖覆蓋的路段,輔助駕駛只能實(shí)現(xiàn)車道居中(在傳感器能識(shí)別車道線的情況下)以及自動(dòng)跟車等簡(jiǎn)單功能。

而NGP在高精地圖+工況復(fù)雜的城市道路上,依靠BEV鳥瞰圖模型,也能實(shí)現(xiàn)高速上的幾乎全程不用接管的輔助駕駛體驗(yàn)。在沒有高精地圖的道路,NGP第?階段的能力提升,主要是在直?遇到紅綠燈時(shí),具備了自動(dòng)起停功能。之前的很多L2+的輔助駕駛,都是無法識(shí)別紅燈的,只能跟著前車停止或前進(jìn);如果遇到紅燈且沒有前車的情況,打開輔助駕駛的車就是妥妥的“闖紅燈”,根本沒法用。所以NGP雖然只是第一階段,但已經(jīng)讓人對(duì)未來充滿更多期待。

今年是城市輔助駕駛技術(shù)出現(xiàn)在我們普通人身邊的元年,我們已經(jīng)看到越來越多的新技術(shù)的落地。小鵬、蔚來、華為和后面的理想汽車都會(huì)紛紛拿出自己的方案,這將會(huì)給消費(fèi)者帶來更多嘗試的機(jī)會(huì),隨著嘗試使用的落地,也會(huì)帶動(dòng)高階自動(dòng)輔助駕駛的完善和發(fā)展,這將極大地促進(jìn)汽車智能化的持續(xù)推進(jìn)。

審核編輯 :李倩

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 神經(jīng)網(wǎng)絡(luò)

    關(guān)注

    42

    文章

    4749

    瀏覽量

    100443
  • 算法
    +關(guān)注

    關(guān)注

    23

    文章

    4592

    瀏覽量

    92540
  • 自動(dòng)駕駛
    +關(guān)注

    關(guān)注

    782

    文章

    13636

    瀏覽量

    166007

原文標(biāo)題:「微侃」城市輔助駕駛NGP中的BEV模型

文章出處:【微信號(hào):QCDZSJ,微信公眾號(hào):汽車電子設(shè)計(jì)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    高級(jí)輔助駕駛ADAS技術(shù)

    的尾部。說到ACC的優(yōu)點(diǎn),顯然,在一定程度上,ACC可以減輕駕駛駕駛的疲勞。ACC系統(tǒng)加上車道偏離輔助系統(tǒng),可以讓你在較好的城市路況中極大的解放雙腳甚至雙手。ACC作為智能
    發(fā)表于 04-03 00:01

    圖像處理在駕駛警示/輔助ADAS的應(yīng)用是什么?

    ADAS是什么?圖像處理在駕駛警示/輔助ADAS的應(yīng)用是什么?
    發(fā)表于 05-31 07:18

    高級(jí)駕駛輔助系統(tǒng)(ADAS)解決方案

    高級(jí)駕駛輔助系統(tǒng)(ADAS)解決方案是增長(zhǎng)最快的汽車行業(yè)之一;根據(jù)Strategy Analytics的預(yù)測(cè),該領(lǐng)域預(yù)計(jì)在五年間(2015-2020)增長(zhǎng)了10%。即使是入門級(jí)模型的設(shè)計(jì)者也期望
    發(fā)表于 11-14 07:11

    華大北斗高精度芯片助力上汽名爵MG7智能駕駛

    隨著上汽名爵全新MG7轎跑車的正式發(fā)布,其優(yōu)雅先鋒主義風(fēng)格設(shè)計(jì)和彪悍的運(yùn)動(dòng)轎車性能立刻贏得了年輕用戶的廣泛青睞。其先進(jìn)的科技配置更是令人矚目,特別在智能駕駛方面,MG7具備NGP高階智能輔助
    發(fā)表于 08-30 14:44

    小鵬汽車有超 20% 的用戶付費(fèi)探索 NGP 自動(dòng)駕駛輔助系統(tǒng)

    了 OTA 升級(jí),NGP 自動(dòng)導(dǎo)航輔助駕駛(公測(cè)版)向用戶開放。NGP 開啟后,可顯示車輛周圍 360° 視角、環(huán)境模擬、限速指示、施工提醒等。 何小鵬還提到,自動(dòng)
    的頭像 發(fā)表于 01-31 09:25 ?2474次閱讀

    量產(chǎn)見真章:小鵬NGP3000公里遠(yuǎn)征挑戰(zhàn)數(shù)據(jù)揭曉,用實(shí)際體驗(yàn)為最強(qiáng)量產(chǎn)自動(dòng)駕駛類功能證言

    。小鵬汽車董事長(zhǎng)?CEO何小鵬本次挑戰(zhàn)活動(dòng),從廣州至北京,全程3675公里,連續(xù)8天,沿海穿越10座城市,采取每天接力的方式,邀請(qǐng)共計(jì)228位嘉賓駕駛小鵬P7,基于NGP自動(dòng)導(dǎo)航輔助
    的頭像 發(fā)表于 04-02 09:15 ?830次閱讀

    基于BEV(Birds Eye View)的自動(dòng)駕駛方案

    BEV下的自動(dòng)駕駛技術(shù)發(fā)展很可能就是端到端的自動(dòng)駕駛框架的契機(jī)。 SelfD里作者利用BEV視角統(tǒng)一了大量行車視頻的數(shù)據(jù)尺度,并進(jìn)行了規(guī)劃和決策模塊的
    發(fā)表于 12-15 14:49 ?1727次閱讀

    智慧城市交通

    智慧城市交通
    的頭像 發(fā)表于 12-29 10:02 ?687次閱讀

    BEV+Transformer對(duì)智能駕駛硬件系統(tǒng)有著什么樣的影響?

    BEV+Transformer是目前智能駕駛領(lǐng)域最火熱的話題,沒有之一,這也是無人駕駛低迷期唯一的亮點(diǎn),BEV+Transformer徹底終結(jié)了2D直視圖+CNN時(shí)代
    的頭像 發(fā)表于 02-16 17:14 ?2485次閱讀

    焦點(diǎn)丨四維圖新120城市高級(jí)輔助駕駛地圖過審

    · · · · · · · · · · 近日,國家自然資源部地圖技術(shù)審查中心公布了全國城市高級(jí)輔助駕駛地圖審圖工作的階段性進(jìn)展,允許企業(yè)批量送審全國城市高級(jí)
    的頭像 發(fā)表于 06-30 11:55 ?446次閱讀

    CVPR上的新頂流:BEV自動(dòng)駕駛感知新范式

    BEV自動(dòng)駕駛感知好比一個(gè)從高處統(tǒng)觀全局的“上帝視角”,將三維環(huán)境信息投影到二維平面,以俯視視角展示環(huán)境的物體和地形。在路徑規(guī)劃、障礙物檢測(cè)、自動(dòng)駕駛決策等方面,
    的頭像 發(fā)表于 08-23 14:51 ?1031次閱讀
    CVPR上的新頂流:<b class='flag-5'>BEV</b>自動(dòng)<b class='flag-5'>駕駛</b>感知新范式

    利用Transformer BEV解決自動(dòng)駕駛Corner Case的技術(shù)原理

    BEV是一種將三維環(huán)境信息投影到二維平面的方法,以俯視視角展示環(huán)境的物體和地形。在自動(dòng)駕駛領(lǐng)域,BEV 可以幫助系統(tǒng)更好地理解周圍環(huán)境,提高感知和決策的準(zhǔn)確性。在環(huán)境感知階段,
    的頭像 發(fā)表于 10-11 16:16 ?727次閱讀
    利用Transformer <b class='flag-5'>BEV</b>解決自動(dòng)<b class='flag-5'>駕駛</b>Corner Case的技術(shù)原理

    自動(dòng)駕駛領(lǐng)域中,什么是BEV?什么是Occupancy?

    BEV是Bird's Eye View 的縮寫,意為鳥瞰視圖。在自動(dòng)駕駛領(lǐng)域,BEV 是指從車輛上方俯瞰的場(chǎng)景視圖。
    的頭像 發(fā)表于 01-13 09:41 ?3269次閱讀
    自動(dòng)<b class='flag-5'>駕駛</b>領(lǐng)域中,什么是<b class='flag-5'>BEV</b>?什么是Occupancy?

    BEV和Occupancy自動(dòng)駕駛的作用

    BEV是Bird's Eye View 的縮寫,意為鳥瞰視圖。在自動(dòng)駕駛領(lǐng)域,BEV 是指從車輛上方俯瞰的場(chǎng)景視圖。BEV 圖像可以提供車輛周圍環(huán)境的完整視圖,包括車輛前方、
    發(fā)表于 01-17 12:33 ?677次閱讀
    <b class='flag-5'>BEV</b>和Occupancy自動(dòng)<b class='flag-5'>駕駛</b>的作用

    自動(dòng)駕駛中一直說的BEV+Transformer到底是個(gè)啥?

    在很多車企的自動(dòng)駕駛介紹,都會(huì)聽到一個(gè)關(guān)鍵技術(shù),那就是BEV+Transformer,那BEV+Transformer到底是個(gè)啥?為什么很多車企在自動(dòng)
    的頭像 發(fā)表于 11-07 11:19 ?189次閱讀
    自動(dòng)<b class='flag-5'>駕駛</b>中一直說的<b class='flag-5'>BEV</b>+Transformer到底是個(gè)啥?