0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

基于端到端的自動(dòng)駕駛系統(tǒng)只能做demo嗎

電子設(shè)計(jì) ? 來(lái)源:電子設(shè)計(jì) ? 作者:電子設(shè)計(jì) ? 2020-12-26 10:39 ? 次閱讀

劍橋大學(xué)工程系團(tuán)隊(duì)創(chuàng)辦的Wayve憑借機(jī)器學(xué)習(xí)算法,只需要使用攝像頭和基本的衛(wèi)星導(dǎo)航就可以實(shí)現(xiàn)自動(dòng)駕駛汽車在陌生的道路上行駛。

自從2016年,英偉達(dá)公開(kāi)了用于自動(dòng)駕駛汽車的端到端深度學(xué)習(xí)技術(shù)之后,已經(jīng)有不計(jì)其數(shù)的公司、單位甚至愛(ài)好者用此技術(shù)做出自動(dòng)駕駛的demo。簡(jiǎn)單網(wǎng)絡(luò)結(jié)構(gòu),可以實(shí)現(xiàn)攝像頭輸入到剎車油門方向盤輸出的直接映射。然而這種低門檻也注定了它可以解決的問(wèn)題并不多,很難應(yīng)對(duì)具體駕駛環(huán)境上的復(fù)雜性。有專家甚至認(rèn)為端到端不適合開(kāi)發(fā)實(shí)用無(wú)人駕駛系統(tǒng),可以做demo,大規(guī)模商用可能非常困難。

端到端只配做demo嗎?由劍橋大學(xué)團(tuán)隊(duì)創(chuàng)辦的Wayve無(wú)人駕駛軟件公司卻不這么認(rèn)為。他們沒(méi)有用高精地圖,也沒(méi)有用激光雷達(dá)等昂貴的傳感器,當(dāng)然也沒(méi)有給汽車手工輸入規(guī)則,只訓(xùn)練20小時(shí)數(shù)據(jù),就可以在從未跑過(guò)的道路上駕駛。

Wayve 研發(fā)團(tuán)隊(duì)認(rèn)為既然是自動(dòng)駕駛,就不需要手工編碼一些規(guī)定,要充分的展現(xiàn)其智能的特性。團(tuán)隊(duì)采用了當(dāng)下大熱的深度學(xué)習(xí)強(qiáng)化學(xué)習(xí)算法,建立了一個(gè)可以像人類一樣慢慢學(xué)習(xí)駕駛的自動(dòng)駕駛系統(tǒng)。

經(jīng)過(guò)探索、優(yōu)化和評(píng)估三個(gè)步驟進(jìn)行迭代,采用深度確定性策略梯度(Deep deterministic policy gradients,DDPG),來(lái)解決車道保持問(wèn)題。

現(xiàn)有技術(shù)的圖像分類體系結(jié)構(gòu)具有數(shù)百萬(wàn)個(gè)參數(shù),而Wayve團(tuán)隊(duì)的網(wǎng)絡(luò)構(gòu)架是一個(gè)深度網(wǎng)絡(luò),有4個(gè)卷積層和3個(gè)完全連接層,總共只有不到1萬(wàn)個(gè)參數(shù),所有處理都在汽車GPU上執(zhí)行。

在強(qiáng)化學(xué)習(xí)仿真測(cè)試中,通過(guò)隨機(jī)生成曲線車道,以及道路紋理和車道標(biāo)記,然后根據(jù)收集的數(shù)據(jù)優(yōu)化策略,再不斷重復(fù)。

結(jié)合了圖像翻譯和行為克隆的端到端零鏡頭框架

大多數(shù)自駕車公司使用模擬來(lái)驗(yàn)證他們的系統(tǒng),而Wayve讓自動(dòng)駕駛汽車在仿真中廣泛學(xué)習(xí)如何處理罕見(jiàn)的邊緣情況。Wayve訓(xùn)練汽車進(jìn)行模擬駕駛,并將學(xué)到的知識(shí)轉(zhuǎn)化到現(xiàn)實(shí)世界。

Wayve沒(méi)有將模擬和現(xiàn)實(shí)世界視為兩個(gè)不同的領(lǐng)域,而是設(shè)計(jì)了一個(gè)框架,將兩者結(jié)合起來(lái),既可以在模擬中訓(xùn)練轉(zhuǎn)向決策,又可以在現(xiàn)實(shí)世界中展現(xiàn)出類似的行為而無(wú)需進(jìn)行真正的演示。

Wayve的模型由一對(duì)最初用于圖像轉(zhuǎn)換的卷積變分自動(dòng)編碼器式的網(wǎng)絡(luò)組成,用于圖像翻譯,即無(wú)監(jiān)督圖像到圖像的翻譯網(wǎng)絡(luò)(Unsupervised Image-to-Image Translation Networks, UNIT))。在兩個(gè)域之間沒(méi)有任何已知的對(duì)齊或?qū)?yīng)關(guān)系的情況下,模型能夠在它們之間進(jìn)行轉(zhuǎn)換。下圖是一個(gè)捕捉場(chǎng)景主要布局的例子。值得注意的是,模擬器的視覺(jué)保真度在學(xué)習(xí)駕駛時(shí)并不是最重要的,他們的模擬世界就像卡通一樣,依舊可以很好的完成仿真模擬。Wayve研究稱,內(nèi)容保真度比視覺(jué)保真度更重要。但是,有效地模擬其他交通參與者的行為仍然是一個(gè)巨大的挑戰(zhàn)。

基于真實(shí)世界的駕駛數(shù)據(jù)和精心設(shè)計(jì)的邊緣案例來(lái)模擬場(chǎng)景

汽車由基于模型的深層強(qiáng)化學(xué)習(xí)系統(tǒng)驅(qū)動(dòng),該算法從離線收集的真實(shí)數(shù)據(jù)中學(xué)習(xí)預(yù)測(cè)模型。這讓模型學(xué)習(xí)并使用預(yù)測(cè)模型所想象的新場(chǎng)景數(shù)據(jù)來(lái)訓(xùn)練駕駛。

Wayve致力于開(kāi)發(fā)更豐富,更強(qiáng)大的時(shí)態(tài)預(yù)測(cè)模型,并相信這是構(gòu)建智能安全自動(dòng)駕駛汽車的關(guān)鍵。

目前,該系統(tǒng)已經(jīng)部署在 JaguarI-PACE 車上。這輛車贏得了2019年度歐洲年度車型的稱號(hào),未來(lái)將在整個(gè)英國(guó)和歐洲大陸收集數(shù)據(jù)。當(dāng)下,讓數(shù)據(jù)逐漸積累,其驅(qū)動(dòng)算法可能達(dá)到人類駕駛員質(zhì)量的95%,能夠處理交通燈,環(huán)形交叉路口,十字路口等。

盡管有人會(huì)覺(jué)得端到端的自動(dòng)駕駛系統(tǒng),既不聰明也不靈活,發(fā)生問(wèn)題難以解釋,然而Wayve在用其強(qiáng)大的算法證明這種深度學(xué)習(xí)的技術(shù)不只可以做demo,未來(lái)也可以保證安全,也可以商用。

審核編輯 黃昊宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    210

    文章

    27839

    瀏覽量

    204617
  • 自動(dòng)駕駛
    +關(guān)注

    關(guān)注

    781

    文章

    13449

    瀏覽量

    165277
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    實(shí)現(xiàn)自動(dòng)駕駛,唯有

    ,去年行業(yè)主流方案還是輕高精地圖城區(qū)智駕,今年大家的目標(biāo)都瞄到了(End-to-End, E2E)。
    的頭像 發(fā)表于 08-12 09:14 ?354次閱讀
    實(shí)現(xiàn)<b class='flag-5'>自動(dòng)駕駛</b>,唯有<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>?

    FPGA在自動(dòng)駕駛領(lǐng)域有哪些優(yōu)勢(shì)?

    可以根據(jù)自動(dòng)駕駛系統(tǒng)的具體需求,通過(guò)編程來(lái)配置FPGA的邏輯功能和連接關(guān)系,以適應(yīng)不同的應(yīng)用場(chǎng)景和算法變化。這種靈活性使得FPGA能夠快速適應(yīng)自動(dòng)駕駛技術(shù)的快速發(fā)展和變化。 低延遲: 自動(dòng)駕
    發(fā)表于 07-29 17:11

    FPGA在自動(dòng)駕駛領(lǐng)域有哪些應(yīng)用?

    是FPGA在自動(dòng)駕駛領(lǐng)域的主要應(yīng)用: 一、感知算法加速 圖像處理:自動(dòng)駕駛中需要通過(guò)攝像頭獲取并識(shí)別道路信息和行駛環(huán)境,這涉及大量的圖像處理任務(wù)。FPGA在處理圖像上的運(yùn)算速度快,可并行性強(qiáng),且功耗
    發(fā)表于 07-29 17:09

    理想汽車加速自動(dòng)駕駛布局,成立“”實(shí)體組織

    近期,理想汽車在其智能駕駛領(lǐng)域邁出了重要一步,正式成立了專注于“自動(dòng)駕駛”的實(shí)體組織,該組織規(guī)模超過(guò)200人,標(biāo)志著理想在
    的頭像 發(fā)表于 07-17 15:42 ?1189次閱讀

    廣汽豐田攜手Momenta推出全場(chǎng)景智能駕駛方案

    在近日舉行的廣汽豐田科技開(kāi)放日上,一場(chǎng)引領(lǐng)未來(lái)的智能駕駛技術(shù)盛宴吸引了全球目光。廣汽豐田攜手國(guó)內(nèi)領(lǐng)先的自動(dòng)駕駛解決方案提供商Momenta,共同推出了
    的頭像 發(fā)表于 06-29 17:36 ?1520次閱讀

    智行者聯(lián)合清華完成國(guó)內(nèi)首套全棧式自動(dòng)駕駛系統(tǒng)的開(kāi)放道路測(cè)試

    近日,智行者與清華大學(xué)車輛學(xué)院李克強(qiáng)院士、李升波教授領(lǐng)導(dǎo)的研究團(tuán)隊(duì),完成了國(guó)內(nèi)首套全棧式自動(dòng)駕駛系統(tǒng)的開(kāi)放道路測(cè)試。
    的頭像 發(fā)表于 04-22 09:24 ?643次閱讀
    智行者聯(lián)合清華完成國(guó)內(nèi)首套全棧式<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動(dòng)駕駛</b><b class='flag-5'>系統(tǒng)</b>的開(kāi)放道路測(cè)試

    佐思汽研發(fā)布《2024年自動(dòng)駕駛研究報(bào)告》

    自動(dòng)駕駛是直接從傳感器信息輸入(如攝像頭圖像、LiDAR等)控制命令輸出(如轉(zhuǎn)向、加減速等)映射的一套
    的頭像 發(fā)表于 04-20 11:21 ?2582次閱讀
    佐思汽研發(fā)布《2024年<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動(dòng)駕駛</b>研究報(bào)告》

    理想汽車自動(dòng)駕駛模型實(shí)現(xiàn)

    理想汽車在感知、跟蹤、預(yù)測(cè)、決策和規(guī)劃等方面都進(jìn)行了模型化,最終實(shí)現(xiàn)了的模型。這種模型不僅完全模型化,還能夠虛擬化,即在模擬環(huán)境中進(jìn)行訓(xùn)練和測(cè)試。
    發(fā)表于 04-12 12:17 ?344次閱讀
    理想汽車<b class='flag-5'>自動(dòng)駕駛</b><b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>模型實(shí)現(xiàn)

    未來(lái)已來(lái),多傳感器融合感知是自動(dòng)駕駛破局的關(guān)鍵

    巨大的進(jìn)展;自動(dòng)駕駛開(kāi)始摒棄手動(dòng)編碼規(guī)則和機(jī)器學(xué)習(xí)模型的方法,轉(zhuǎn)向全面采用的神經(jīng)網(wǎng)絡(luò)AI系統(tǒng),它能模仿學(xué)習(xí)人類司機(jī)的
    發(fā)表于 04-11 10:26

    自動(dòng)駕駛的基石在哪里?

    深度學(xué)習(xí)(DL)與自動(dòng)駕駛(AD)的融合標(biāo)志著該領(lǐng)域的重大飛躍,吸引了學(xué)術(shù)界和工業(yè)界的關(guān)注。配備了攝像頭和激光雷達(dá)的AD系統(tǒng)模擬了類似人類的決策過(guò)程。
    發(fā)表于 02-26 11:38 ?292次閱讀
    <b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動(dòng)駕駛</b>的基石在哪里?

    自動(dòng)駕駛的基石到底是什么?

    深度學(xué)習(xí)(DL)與自動(dòng)駕駛(AD)的融合標(biāo)志著該領(lǐng)域的重大飛躍,吸引了學(xué)術(shù)界和工業(yè)界的關(guān)注。配備了攝像頭和激光雷達(dá)的AD系統(tǒng)模擬了類似人類的決策過(guò)程。
    發(fā)表于 02-22 09:50 ?322次閱讀
    <b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動(dòng)駕駛</b>的基石到底是什么?

    康謀方案 | 基于場(chǎng)景的硬件在環(huán)(HiL)測(cè)試智能解決方案

    。同時(shí),針對(duì)不同傳感器進(jìn)行協(xié)同工作,模擬不同的駕駛環(huán)境和交通狀況,測(cè)試和驗(yàn)證自動(dòng)駕駛車輛的算法和決策策略,從而確保其安全性和可靠性。 方案特點(diǎn) 針對(duì)ADAS/AD系統(tǒng)進(jìn)行基于場(chǎng)景的
    的頭像 發(fā)表于 01-31 17:17 ?521次閱讀
    康謀方案 | 基于場(chǎng)景的<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>硬件在環(huán)(HiL)測(cè)試智能解決方案

    兩種自動(dòng)駕駛系統(tǒng)算法架構(gòu)

    基于學(xué)習(xí)的自動(dòng)駕駛是一個(gè)活躍的研究領(lǐng)域。采用了一些基于學(xué)習(xí)的駕駛方法,例如可供性和強(qiáng)化學(xué)習(xí),取得了不錯(cuò)的性能,模仿方法也被用來(lái)回歸人類演示的控制命令。
    發(fā)表于 01-18 09:33 ?1114次閱讀
    兩種<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>的<b class='flag-5'>自動(dòng)駕駛</b><b class='flag-5'>系統(tǒng)</b>算法架構(gòu)

    LabVIEW開(kāi)發(fā)自動(dòng)駕駛的雙目測(cè)距系統(tǒng)

    LabVIEW開(kāi)發(fā)自動(dòng)駕駛的雙目測(cè)距系統(tǒng) 隨著車輛駕駛技術(shù)的不斷發(fā)展,自動(dòng)駕駛技術(shù)正日益成為現(xiàn)實(shí)。從L2級(jí)別的輔助駕駛技術(shù)
    發(fā)表于 12-19 18:02

    基于的Al自動(dòng)駕駛決策方法

    隨著人工智能的迅速發(fā)展,自動(dòng)駕駛技術(shù)正經(jīng)歷著一場(chǎng)革命性的變革。人工智能的出現(xiàn)為自動(dòng)駕駛系統(tǒng)帶來(lái)了深度學(xué)習(xí)等方法的應(yīng)用,不再完全依賴人類專家設(shè)計(jì)特征,而是能夠自動(dòng)進(jìn)行特征描述和學(xué)習(xí)。
    發(fā)表于 09-25 12:33 ?771次閱讀
    基于<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>的Al<b class='flag-5'>自動(dòng)駕駛</b>決策方法