0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

為汽車接口、安全和計算密集型負載選擇和使用 FPGA

海闊天空的專欄 ? 來源:Clive “Max” Maxfield ? 作者:Clive “Max” Maxfi ? 2023-10-03 14:37 ? 次閱讀

作者:Clive “Max” Maxfield

從傳統(tǒng)上來講,汽車中的計算任務(wù)是由微控制器單元 (MCU) 和應(yīng)用處理器 (AP) 完成的。一輛普通的中檔車可能包含 25 至 35 個MCU/AP,而豪華車則可能采用 70 個或更多。越來越多的汽車需要極其復(fù)雜的密集型計算能力,用于執(zhí)行高級駕駛輔助系統(tǒng)(ADAS)、信息娛樂、控制、網(wǎng)絡(luò)和安全等任務(wù)。其中許多應(yīng)用涉及與人工智能AI) 相結(jié)合的圖像和視頻處理方面的機器視覺。

獨立的處理器架構(gòu)難以處理傳感器、照相機和顯示器等外圍設(shè)備所需的所有電氣接口和各種協(xié)議。此外,在許多情況下,這類處理器根本無法滿足機器視覺和人工智能等任務(wù)的極端計算需求。

為了解決這種復(fù)雜性,汽車系統(tǒng)設(shè)計人員正把目光投向現(xiàn)場可編程門陣列 (FPGA)。這樣做不是為了取代現(xiàn)有的MCU/AP,而是作為它們和其他設(shè)備之間的橋梁,并通過卸載通信和其他計算密集型任務(wù)來增強 MCU/AP 的性能。

由于 FPGA 可進行編程以支持各種電氣接口和協(xié)議,因此可作為 MCU/AP 和傳感器、照相機、顯示器之間的橋梁。此外,由于 FPGA能夠以大規(guī)模并行方式進行計算和工作,因此可以用來執(zhí)行計算密集型的視覺處理和人工智能任務(wù),從而釋放主機處理器性能,用于執(zhí)行其他任務(wù)。

本文將討論現(xiàn)代汽車的處理要求,介紹一些可由 FPGA 處理的汽車應(yīng)用。然后,以 Lattice Semiconductor 提供的一些 FPGA為例進行介紹并展示如何用這種器件解決連接、處理和安全方面的問題。本文還將介紹相關(guān)的開發(fā)板,以幫助設(shè)計人員上手工作。

FPGA 的目標汽車應(yīng)用

為了實現(xiàn) ADAS 功能,今天的汽車在車身上采用了許多傳感器,包括攝像頭、雷達、LiDAR和超聲波探測器。在許多情況下,必須從不同的傳感器獲取數(shù)據(jù)并對這些數(shù)據(jù)進行預(yù)處理(消除噪音并按要求格式化),然后通過傳感器融合來組合這些數(shù)據(jù),以使由此獲得的信息比通過單獨使用不同傳感器的數(shù)據(jù)而獲得的信息更具確定性。人工智能應(yīng)用多用于數(shù)據(jù)分析,做出決策并采取適當?shù)拇胧?/p>

一種相對較新的趨勢是部署電子(或稱“數(shù)字”)后視鏡。這種情況下,會在后車窗內(nèi)安裝一個高分辨率廣角攝像頭。來自該攝像頭的視頻流會發(fā)送至取代了傳統(tǒng)后視鏡的數(shù)字顯示屏上,從而能夠更清晰地觀察車輛后方,不受后座乘客的阻擋。有些情況下,由安裝在兩個側(cè)后視鏡上的攝像頭產(chǎn)生的視頻流可與來自后窗攝像頭的視頻流合并。將這三個反饋信號“拼接”在一起,在超寬的電子后視鏡上產(chǎn)生單一圖像,讓駕駛員能夠更好地觀察車輛周圍的情況。

最近的另一個趨勢是部署安裝在儀表板上、轉(zhuǎn)向柱上的或者集成在后視鏡(普通或電子)中的車內(nèi)攝像頭。當結(jié)合人工智能時,這些車內(nèi)后視鏡可用于執(zhí)行眾多任務(wù),如識別不同的駕駛員并相應(yīng)地調(diào)整駕駛員座椅和后視鏡。除了監(jiān)視駕駛員以確保他們注意道路和不打瞌睡之外,這類系統(tǒng)還可以檢測駕駛員有無瞌睡跡象以及健康問題或痛苦表情(如癲癇或心臟病發(fā)作),然后采取適當措施。這些措施可能包括啟動危險警告燈,實施剎車并將車輛導(dǎo)引至路邊。更多的應(yīng)用還包括:通過防止汽車被鎖和發(fā)出閃燈信號來確保不會誤將幼兒和寵物遺留在后座上無人看管,以及在乘客將手機、包或包裹等物品遺落在后座上時提醒司機。

在基于視頻的應(yīng)用方面,有些情況下需要將一個視頻輸入分成多個視頻流,有些情況下則可能是根據(jù)設(shè)計要求將多個視頻流匯聚成一個。

隨著電動汽車 (EV) 部署的增加,需要監(jiān)視和控制電機,并監(jiān)視和管理充電過程以使電池壽命達到最長。

最重要的是,今天的許多汽車開始啟用 5G 或 V2X 功能,其中V2X(“車輛到任何東西”)是指車輛和任何可能影響車輛(或受車輛影響)的其他實體之間的通信,從路邊基礎(chǔ)設(shè)施到其他車輛。隨之而來的就是需要安全保障,以防止黑客入侵車輛。

汽車級器件

不是所有的 FPGA 都適用于汽車應(yīng)用,記住這點很重要。汽車電子委員會 (AEC) 是一個最初由克萊斯勒、福特和通用汽車在 20 世紀 90年代成立的組織,旨在建立共同的零件鑒定和質(zhì)量體系標準。最常引用的 AEC 文獻之一便是 AEC-Q100——“基于故障機制的集成電路應(yīng)力測試鑒定?!?/p>

IATF 16949:2016 是一項技術(shù)規(guī)范,旨在制定質(zhì)量管理體系,用于規(guī)定持續(xù)改進,強調(diào)預(yù)防缺陷并減少汽車行業(yè)供應(yīng)鏈和裝配流程中的變動和浪費。IATF 16949:2016 是由國際汽車工作組 (IATF) 和 ISO 技術(shù)委員會在 ISO 9001 標準基礎(chǔ)上制定的。

汽車市場的電子系統(tǒng)供應(yīng)商越來越要求半導(dǎo)體供應(yīng)商提供符合 AEC-Q100 標準的產(chǎn)品,并能證明其質(zhì)量體系獲得了 ISO/TS-16949 認證

為工作選擇正確的 FPGA

FPGA 非常靈活,但不同的器件系列會提供各種不同能力和功能組合,從而更加適合特定的任務(wù)。以嵌入式視覺應(yīng)用為例,現(xiàn)代攝像頭和顯示器通常采用 MIPI接口。MIPI CSI-2(攝像頭/傳感器)和 DSI(顯示器)協(xié)議都采用了被稱為 D-PHY 的通信物理層 (PHY)。傳統(tǒng)的 MCU/AP可能不支持這種接口,但一些 FPGA 會支持,如 Lattice Semiconductor 的 CrossLink-NX 嵌入式視覺和處理 FPGA。

除了每個 PHY 都支持 10 Gb/s 速率的兩個加固型四通道 MIPI D-PHY 收發(fā)器外,CrossLink-NX 器件還支持 5 Gb/sPCIe、1.5 Gb/s 可編程輸入/輸出 (I/O) 以及1066 Mb/s 的 DDR3。這種器件還支持傳統(tǒng)的電氣接口和協(xié)議,如低壓差分信號(LVDS)、Sub-LVDS(LVDS 的降低電壓版本)、Open LVDS 顯示接口 (OLDI) 和串行千兆位媒體獨立接口(SGMII)。因此,這些器件可用于匯集視頻流、分離視頻流、運行人工智能應(yīng)用,并且在執(zhí)行這些任務(wù)的同時,還可以作為傳統(tǒng) MCU/AP
與現(xiàn)代傳感器、顯示器之間的橋梁。

希望評估 CrossLink-NX FPGA 的汽車系統(tǒng)開發(fā)商會發(fā)現(xiàn),LIFCL-VIP-SI-EVN CrossLink-NX VIP 傳感器輸入板(圖 1)和 LF-EVDK1-EVN 模塊化嵌入式視覺套件的組合的意義重大(前者可以作為后者的輸入板)。除了 CrossLink-NX FPGA之外,傳感器輸入板還具有四個 1300 萬像素的 Sony IMX258 CMOS MIPI 圖像傳感器,可支持 4K2K @ 30 幀/秒 (fps) 或1080p @ 60 幀/秒。該板還支持通過三個獨立的 PMOD 接口連接傳感器。

1.png

對于還需要高 I/O 帶寬的計算密集型應(yīng)用——諸如像用于手勢識別和控制、語音識別和控制、人類存在檢測、乘員識別和駕駛員監(jiān)控之類的 AI應(yīng)用來說,Lattice 的 ECP5 FPGA 具有高達 3.2 Gb/s 的串行器/解串器(SERDES),為獲得更高粒度而在雙通道塊中的每個器件都采用了多達有四個通道,具有多達 85K 的查找表 (LUT)、能為對稱濾波器提供 2倍資源改進的增強型數(shù)字信號處理 (DSP) 塊,并支持減緩單粒子翻轉(zhuǎn) (SEU)。這些 FPGA 還為 LVCMOS33/25/18/15/12、XGMII、LVTTL、LVDS、總線 LVDS、7:1 LVDS、LVPECL 和 MIPI D-PHY I/O 接口提供可編程I/O 支持。

例如,LFE5U-85F-6BG554C 就是一種 ECP5 器件,該器件有 84,000 個邏輯元件,3.75 Mb RAM 和 259 個I/O。同樣值得關(guān)注的還有 LFE5UM-45F-VERSA-EVNG ECP5 Versa 開發(fā)套件(圖 2)。該開發(fā)板采用半長 PCI Express(PCIe) 外形尺寸,設(shè)計人員可用其評估 ECP5 FPGA 的關(guān)鍵連接特性,包括 PCIe、千兆以太網(wǎng) (GbE)、DDR3 和通用 SERDES性能。

2.png

用 FPGA 確保汽車安全

現(xiàn)在,黑客造成的安全威脅在不斷增加,新的違規(guī)事件持續(xù)發(fā)生。就汽車而言,網(wǎng)絡(luò)攻擊可能造成失控,導(dǎo)致乘客和行人傷亡,造成受攻擊汽車和其他車輛損壞以及財產(chǎn)損失。

汽車安全解決方案的很大一部分是建立一個信任根 (RoT);也就是說,可以始終信任系統(tǒng)中的某個硬件資源。一種解決方案是基于 FPGA 的硬件 RoT(HRoT),如 Lattice 的MachXO3D 系列器件提供的解決方案。除了大量的 LUT 資源和 I/O外,這些基于閃存的器件還實現(xiàn)了瞬時啟動和熱插拔功能。通用應(yīng)用包括膠合邏輯、總線橋接、總線接口、電機控制、上電控制和其他控制邏輯應(yīng)用。

特別值得注意的是,MachXO3D 是唯一同時具有雙啟動能力和少于 10K LUT 的 FPGA,該器件配備了美國國家標準和技術(shù)研究所 (NIST)認證的不可變安全引擎。這使得 MachXO3D 可以作為汽車的 HRoT,以“系統(tǒng)的先開后關(guān)器件”的形式發(fā)揮作用。當系統(tǒng)上電時,MachXO3D首先檢查以確保其正在運行經(jīng)過驗證的固件。然后,該器件檢查系統(tǒng)中其他器件的固件。如果系統(tǒng)中的任何組件受到攻擊或損害,包括其本身,MachXO3D都會拒絕可疑固件并使用已知的、良好的、經(jīng)過認證的固件圖像重新加載該組件。

對于那些有興趣評估基于 MachXO3D 的設(shè)計的開發(fā)人員,LCMXO3D-9400HC-D-EVN MachXO3D
開發(fā)板提供了一個可擴展的原型開發(fā)平臺(圖 3)。該板具有一個 L-ASC10(模擬檢測和控制)硬件管理器件、一個與 Arduino 和 Raspberry Pi板搭配使用的通用 I/O 接口、兩個 Hirose FX12-40 針座位置 (DNI),一個 Aardvark 針座 (DNI) 以及具有四重讀取功能的128 Mbit 串行外圍接口 (SPI) 閃存。

3.png

該開發(fā)板的尺寸為 4 x 6 英寸,配備供電和編程用 USB mini-B 接口,以及支持 Arduino、Aardvark、FX12、Hirose 和Raspberry Pi 的多個針座位置。該開發(fā)板包括一根 USB 線和一本快速入門指南。

結(jié)論

現(xiàn)代汽車電子需要越來越多的傳感器、電氣接口和協(xié)議,并對處理能力和帶寬提出了相應(yīng)的要求。由于增加了人工智能、機器視覺處理以及安全要求,使得在實施采用傳統(tǒng)MCU 或 AP 方法的解決方案時變得復(fù)雜。

如圖所示,通過適當?shù)厥褂?FPGA,設(shè)計人員可以增加一定的靈活性和處理能力。也就是說,可以連接完全不同的處理環(huán)境,執(zhí)行傳感器匯集和融合功能,解決 I/O帶寬要求,并以大規(guī)模并行的方式完成計算和運行,同時釋放主處理器功能來執(zhí)行其他任務(wù)。

在安全方面,具有雙啟動能力和 NIST 認證的不可變安全引擎的、基于閃存的 FPGA 可以作為汽車的
HRoT,并確保自身和其他器件只運行經(jīng)過認證的固件,從而防止黑客通過加密技術(shù)破壞汽車系統(tǒng)。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 傳感器
    +關(guān)注

    關(guān)注

    2545

    文章

    50448

    瀏覽量

    751095
  • FPGA
    +關(guān)注

    關(guān)注

    1625

    文章

    21624

    瀏覽量

    601245
  • mcu
    mcu
    +關(guān)注

    關(guān)注

    146

    文章

    16888

    瀏覽量

    349929
  • 汽車
    +關(guān)注

    關(guān)注

    13

    文章

    3385

    瀏覽量

    37105
收藏 人收藏

    評論

    相關(guān)推薦

    HarmonyOS CPU與I/O密集型任務(wù)開發(fā)指導(dǎo)

    一、CPU密集型任務(wù)開發(fā)指導(dǎo) CPU密集型任務(wù)是指需要占用系統(tǒng)資源處理大量計算能力的任務(wù),需要長時間運行,這段時間會阻塞線程其它事件的處理,不適宜放在主線程進行。例如圖像處理、視頻編碼、數(shù)據(jù)分析等
    的頭像 發(fā)表于 02-18 10:17 ?941次閱讀
    HarmonyOS CPU與I/O<b class='flag-5'>密集型</b>任務(wù)開發(fā)指導(dǎo)

    用于汽車接口、安全計算密集型負載FPGA選擇和使用

    極其復(fù)雜的計算密集型功能來完成高級駕駛輔助系統(tǒng) (ADAS)、信息娛樂、控制、網(wǎng)絡(luò)和安全等任務(wù)。其中許多應(yīng)用涉及圖像和視頻處理形式的機器視覺以及人工智能 (AI)。 單獨的處理器架構(gòu)很難處理傳感器、相機和顯示器等外圍設(shè)備所需的所
    的頭像 發(fā)表于 01-13 14:02 ?8289次閱讀

    鴻蒙原生應(yīng)用開發(fā)-ArkTS語言基礎(chǔ)類庫多線程I/O密集型任務(wù)開發(fā)

    使用異步并發(fā)可以解決單次I/O任務(wù)阻塞的問題,但是如果遇到I/O密集型任務(wù),同樣會阻塞線程中其它任務(wù)的執(zhí)行,這時需要使用多線程并發(fā)能力來進行解決。 I/O密集型任務(wù)的性能重點通常不在于CPU的處理
    發(fā)表于 03-21 14:57

    計算密集型的程序簡析

    人工智能學(xué)習(xí)1. 人工智能應(yīng)用場景網(wǎng)絡(luò)安全、電子商務(wù)、計算模擬、社交網(wǎng)絡(luò) … …2. 人工智能必備三要素數(shù)據(jù),算法,計算計算力之CPU、GPU對比:CPU主要適合I\O
    發(fā)表于 09-07 06:14

    HarmonyOS CPU與I/O密集型任務(wù)開發(fā)指導(dǎo)

    一、CPU密集型任務(wù)開發(fā)指導(dǎo) CPU密集型任務(wù)是指需要占用系統(tǒng)資源處理大量計算能力的任務(wù),需要長時間運行,這段時間會阻塞線程其它事件的處理,不適宜放在主線程進行。例如圖像處理、視頻編碼、數(shù)據(jù)分析等
    發(fā)表于 09-26 16:29

    軟件密集型裝備故障的靜態(tài)檢測

    軟件密集型裝備故障的靜態(tài)檢測:軟件密集型裝備是指軟件和硬件緊密結(jié)合的裝備,軟件密集型裝備中的故障多由軟件與硬件相互作用引發(fā)。本文對程序流程違反硬件工作時序引起
    發(fā)表于 06-21 22:35 ?16次下載

    計算高度密集型應(yīng)用在異構(gòu)多核DSP上的運行方法研究

    計算高度密集型應(yīng)用在異構(gòu)多核DSP上的運行方法研究
    發(fā)表于 10-19 11:00 ?5次下載
    <b class='flag-5'>計算</b>高度<b class='flag-5'>密集型</b>應(yīng)用在異構(gòu)多核DSP上的運行方法研究

    新型處理器的數(shù)據(jù)密集型計算

    針對急劇上升的大規(guī)模數(shù)據(jù),傳統(tǒng)的數(shù)據(jù)密集型計算已經(jīng)無法再在此種場景下適用.對此,大量的學(xué)者們對算法進行不斷的改進,并提出利用新型的處理器來進行復(fù)雜的數(shù)據(jù)密集型計算.在眾多的新型處理器中
    發(fā)表于 01-10 14:08 ?0次下載

    數(shù)據(jù)中心依靠服務(wù)器計算密集型架構(gòu)提供支持

    支持AI和ML部署的數(shù)據(jù)中心依靠基于圖形處理單元(GPU)的服務(wù)器計算密集型架構(gòu)提供支持。
    的頭像 發(fā)表于 04-28 17:04 ?2643次閱讀

    借助多功能Xilinx Zynq Ultrascale+ MPSoC加速計算密集型應(yīng)用開發(fā)

    計算密集型應(yīng)用是指需要大量復(fù)雜計算的任何計算機應(yīng)用。像 AI 推理、大數(shù)據(jù)分析、網(wǎng)絡(luò)和科學(xué)研究建模之類就是如今的一些比較流行的計算
    的頭像 發(fā)表于 08-02 08:03 ?1759次閱讀
    借助多功能Xilinx Zynq Ultrascale+ MPSoC加速<b class='flag-5'>計算</b><b class='flag-5'>密集型</b>應(yīng)用開發(fā)

    FPGA執(zhí)行計算密集型任務(wù)性能表現(xiàn)及優(yōu)勢有哪些

    FPGA可用于處理多元計算密集型任務(wù),依托流水線并行結(jié)構(gòu)體系,FPGA相對GPU、CPU在計算結(jié)果返回時延方面具備技術(shù)優(yōu)勢。
    的頭像 發(fā)表于 11-10 09:49 ?933次閱讀

    用于汽車接口、安全計算密集型負載FPGA選擇和使用

    發(fā)表于 11-24 19:25 ?0次下載
    用于<b class='flag-5'>汽車</b><b class='flag-5'>接口</b>、<b class='flag-5'>安全</b>和<b class='flag-5'>計算</b><b class='flag-5'>密集型</b><b class='flag-5'>負載</b>的 <b class='flag-5'>FPGA</b> 的<b class='flag-5'>選擇</b>和使用

    虹科│還在為數(shù)據(jù)密集型計算環(huán)境下的存儲連接而煩惱嗎?

    虹科●存儲連接引言相信“大數(shù)據(jù)”這三個字對于我們來說已經(jīng)成為像柴米油鹽一樣熟悉的存在,每個人都清楚自己處在大數(shù)據(jù)的時代,那大家知道嗎?我們今天提到的數(shù)據(jù)密集型計算
    的頭像 發(fā)表于 10-29 18:08 ?709次閱讀
    虹科│還在為數(shù)據(jù)<b class='flag-5'>密集型</b><b class='flag-5'>計算</b>環(huán)境下的存儲連接而煩惱嗎?

    虹科新品│還在為數(shù)據(jù)密集型計算環(huán)境下的存儲連接而煩惱嗎?

    虹科●存儲連接引言相信“大數(shù)據(jù)”這三個字對于我們來說已經(jīng)成為像柴米油鹽一樣熟悉的存在,每個人都清楚自己處在大數(shù)據(jù)的時代,那大家知道嗎?我們今天提到的數(shù)據(jù)密集型計算
    的頭像 發(fā)表于 11-01 15:49 ?612次閱讀
    虹科新品│還在為數(shù)據(jù)<b class='flag-5'>密集型</b><b class='flag-5'>計算</b>環(huán)境下的存儲連接而煩惱嗎?

    云優(yōu)化性能:使用基于閃存的存儲的I/O密集型工作負載

    電子發(fā)燒友網(wǎng)站提供《云優(yōu)化性能:使用基于閃存的存儲的I/O密集型工作負載.pdf》資料免費下載
    發(fā)表于 08-28 10:04 ?0次下載
    云優(yōu)化性能:使用基于閃存的存儲的I/O<b class='flag-5'>密集型</b>工作<b class='flag-5'>負載</b>