0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

基于IMX214+ZYNQ XC7Z100的1080P雙目視覺智能平臺

星星科技指導(dǎo)員 ? 來源:eetop ? 作者:orihard1 ? 2024-01-09 11:03 ? 次閱讀

一、雙目視覺智能平臺概述

雙目視覺智能平臺以雙路CMOS傳感器IMX214+XC7Z100FPGA為基礎(chǔ),支持雙路1080P60fs視頻輸入,ZYNQFPGA支持FPGA預(yù)處理和雙ARM計算。軟件支持雙目攝像頭采集及QT圖像顯示,ARM接口管理及豐富的圖像處理軟件。

二、硬件資源1FMC雙目MIPI模塊FL0214

FMC雙目MIPI模塊FL0214為MIPI接口的2路1300萬像素的CMOS攝像頭模塊。FL0214模塊帶有2個MIPI接口的攝像頭模組,攝像頭模組采用的是索尼(SONY)公司的CMOS感光芯片IMX214,攝像頭1608191002664445.gif高分別率為4224(水平)x3120(垂直)。攝像頭的MIPI信號通過MC20901芯片轉(zhuǎn)換為LVDS信號到FMC接口供FPGA采樣。

模塊有一個標(biāo)準(zhǔn)的LPC的FMC接口,用于連接FPGA開發(fā)板,F(xiàn)MC的連接器型號為:ASP_134604_01

2.1FL0214模塊的參數(shù)說明

以下為FL0214雙目MIPI攝像頭模塊的詳細(xì)參數(shù):

CMOS感光芯片:SONYIMX214

輸出分別率:13Mega-Pixel(4208×3120)@30fps,4K2K@30fps,1080p@60幀;

圖像輸出格式:RAW10/8,COMP8/6;

調(diào)焦距離:10CM~無窮大

調(diào)焦方式:電機(jī)馬達(dá)自動調(diào)焦;

可視角度:80.7°±3°(Diag)

攝像頭輸出:CSI-2串行數(shù)據(jù)輸出(MIPI4Lane,兼容D-PHY標(biāo)準(zhǔn)V1.1)

攝像頭配置接口:I2C;

MC20901驅(qū)動芯片:電平轉(zhuǎn)換(MIPID-PHY->LVDS):

工作溫度:-20°~65°;

2.2FL0214模塊的結(jié)構(gòu)圖

1608191043794928.jpg

FL0214雙目MIPI攝像頭尺寸結(jié)構(gòu)圖

2.3FL0214模塊原理框圖

FL0214模塊的原理設(shè)計框圖如下:

1608191052607954.jpg

關(guān)于IMX214攝像頭和MIPID-PHY芯片的電路具體參考設(shè)計請參考攝像頭的資料和芯片手冊。

2.4模塊FMCLPC的引腳分配:

下面只列了電源和接口的信號,GND的信號沒有列出,具體用戶可以參考原理圖。

PinNumber SignalName Description
C35 +12V 12V電源輸入
C37 +12V 12V電源輸入
D32 +3.3V 3.3V電源輸入
C34 GA0 EEPROM地址位0位
D35 GA1 EEPROM地址位1位
D9 CSI1_CMOS_LP_CLK_N 第一路攝像頭CMOS時鐘負(fù)極輸出
D8 CSI1_CMOS_LP_CLK_P 第一路攝像頭CMOS時鐘正極輸出
G16 CSI1_CMOS_LP0_N 第一路攝像頭CMOSLANE0數(shù)據(jù)負(fù)極輸出
G15 CSI1_CMOS_LP0_P 第一路攝像頭CMOSLANE0數(shù)據(jù)正極輸出
G13 CSI1_CMOS_LP1_N 第一路攝像頭CMOSLANE1數(shù)據(jù)負(fù)極輸出
G12 CSI1_CMOS_LP1_P 第一路攝像頭CMOSLANE1數(shù)據(jù)正極輸出
G19 CSI1_CMOS_LP2_N 第一路攝像頭CMOSLANE2數(shù)據(jù)負(fù)極輸出
G18 CSI1_CMOS_LP2_P 第一路攝像頭CMOSLANE2數(shù)據(jù)正極輸出
G10 CSI1_CMOS_LP3_N 第一路攝像頭CMOSLANE3數(shù)據(jù)負(fù)極輸出
G9 CSI1_CMOS_LP3_P 第一路攝像頭CMOSLANE3數(shù)據(jù)正極輸出
G7 CSI1_LVDS_CLK_N 第一路攝像頭LVDS時鐘負(fù)極輸出
G6 CSI1_LVDS_CLK_P 第一路攝像頭LVDS時鐘正極輸出
H14 CSI1_LVDS_HS0_N 第一路攝像頭LVDSLANE0數(shù)據(jù)負(fù)極輸出
H13 CSI1_LVDS_HS0_P 第一路攝像頭LVDSLANE0數(shù)據(jù)正極輸出
H11 CSI1_LVDS_HS1_N 第一路攝像頭LVDSLANE1數(shù)據(jù)負(fù)極輸出
H10 CSI1_LVDS_HS1_P 第一路攝像頭LVDSLANE1數(shù)據(jù)正極輸出
H17 CSI1_LVDS_HS2_N 第一路攝像頭LVDSLANE2數(shù)據(jù)負(fù)極輸出
H16 CSI1_LVDS_HS2_P 第一路攝像頭LVDSLANE2數(shù)據(jù)正極輸出
H8 CSI1_LVDS_HS3_N 第一路攝像頭LVDSLANE3數(shù)據(jù)負(fù)極輸出
H7 CSI1_LVDS_HS3_P 第一路攝像頭LVDSLANE3數(shù)據(jù)正極輸出
G21 CSI1_OTP_B 第一路攝像頭編程接口
D26 CSI1_RST_N 第一路攝像頭復(fù)位信號輸入
D21 CSI2_CMOS_LP_CLK_N 第二路攝像頭CMOS時鐘負(fù)極輸出
D20 CSI2_CMOS_LP_CLK_P 第二路攝像頭CMOS時鐘正極輸出
G34 CSI2_CMOS_LP0_N 第二路攝像頭CMOSLANE0數(shù)據(jù)負(fù)極輸出
G33 CSI2_CMOS_LP0_P 第二路攝像頭CMOSLANE0數(shù)據(jù)正極輸出
G28 CSI2_CMOS_LP1_N 第二路攝像頭CMOSLANE1數(shù)據(jù)負(fù)極輸出
G27 CSI2_CMOS_LP1_P 第二路攝像頭CMOSLANE1數(shù)據(jù)正極輸出
G37 CSI2_CMOS_LP2_N 第二路攝像頭CMOSLANE2數(shù)據(jù)負(fù)極輸出
G36 CSI2_CMOS_LP2_P 第二路攝像頭CMOSLANE2數(shù)據(jù)正極輸出
G25 CSI2_CMOS_LP3_N 第二路攝像頭CMOSLANE3數(shù)據(jù)負(fù)極輸出
G24 CSI2_CMOS_LP3_P 第二路攝像頭CMOSLANE3數(shù)據(jù)正極輸出
C23 CSI2_LVDS_CLK_N 第二路攝像頭LVDS時鐘負(fù)極輸出
C22 CSI2_LVDS_CLK_P 第二路攝像頭LVDS時鐘正極輸出
H29 CSI2_LVDS_HS0_N 第二路攝像頭LVDSLANE0數(shù)據(jù)負(fù)極輸出
H28 CSI2_LVDS_HS0_P 第二路攝像頭LVDSLANE0數(shù)據(jù)正極輸出
H26 CSI2_LVDS_HS1_N 第二路攝像頭LVDSLANE1數(shù)據(jù)負(fù)極輸出
H25 CSI2_LVDS_HS1_P 第二路攝像頭LVDSLANE1數(shù)據(jù)正極輸出
H32 CSI2_LVDS_HS2_N 第二路攝像頭LVDSLANE2數(shù)據(jù)負(fù)極輸出
H31 CSI2_LVDS_HS2_P 第二路攝像頭LVDSLANE2數(shù)據(jù)正極輸出
H23 CSI2_LVDS_HS3_N 第二路攝像頭LVDSLANE3數(shù)據(jù)負(fù)極輸出
H22 CSI2_LVDS_HS3_P 第二路攝像頭LVDSLANE3數(shù)據(jù)正極輸出
C27 CSI2_OTP_B 第二路攝像頭編程接口
D27 CSI2_RST_N 第一路攝像頭復(fù)位信號輸入
D14 FMC_CSI1_SCL 第一路攝像頭IIC總線時鐘
D15 FMC_CSI1_SDA 第二路攝像頭IIC總線數(shù)據(jù)
H37 FMC_CSI2_SCL 第二路攝像頭IIC總線時鐘
H38 FMC_CSI2_SDA 第二路攝像頭IIC總線數(shù)據(jù)
C34 GA0 EEPROM的I2C地址0
D35 GA1 EEPROM的I2C地址1
C30 SCL EEPROM的I2C時鐘
C31 SDA EEPROM的I2C數(shù)據(jù)
G39 VADJ VADJ電源輸入
H40 VADJ VADJ電源輸入

三、硬件資源2-基于XC7Z100的圖像處理底板

1608191086455183.jpg

1608191087354870.gif

1.1主要性能和優(yōu)勢

使用Zynq-7000SoC對嵌入式應(yīng)用進(jìn)行快速原型設(shè)計以實(shí)現(xiàn)優(yōu)化

硬件、設(shè)計工具、IP、以及預(yù)驗(yàn)證參考設(shè)計

演示嵌入式設(shè)計,面向視頻通道

存儲接口

1GBDDR3組件存儲

1GBDDR3SODIM存儲器

支持包含DualARMCortex-A9核處理器的嵌入式處理

使用10-100-1000MbpsEthernet(RGMII)開發(fā)網(wǎng)絡(luò)應(yīng)用

使用HDMI輸出實(shí)現(xiàn)視頻顯示應(yīng)用

擴(kuò)展I/O,包含F(xiàn)PGAMezzanineCard(FMC)接口

四、軟件資源

軟件支持:

支持從microSD卡加載ubuntu系統(tǒng)

支持利用QSPI模式配置程序

支持RS232連接計算機(jī)串口通信

支持外接HDMI連接顯示器,并支持鍵盤,鼠標(biāo)等外接設(shè)備進(jìn)行演示

支持Msata存儲設(shè)備,支持高速數(shù)據(jù)存儲功能(SATA存儲單獨(dú)定制開發(fā))

平臺引入了Xilinx公司的SDSoC?開發(fā)工具,提供了嵌入式C/C++應(yīng)用開發(fā)體驗(yàn),包括了EclipseIDE和完整的設(shè)計環(huán)境,支持Zynq?AllProgrammableSoC開發(fā),同時集成了Vivado設(shè)計環(huán)境。

FMC上接高速ADC,DAC子卡,CameraLink子卡等,進(jìn)行功能擴(kuò)展以及客戶的定制需求,并可提供演示程序

五、雙目視覺案例

在VIVADO軟件開發(fā)環(huán)境里下載雙目測試?yán)痰介_發(fā)板,我們可以通過開發(fā)板的HDMI輸出接口顯示雙目的視頻圖像到HDMI顯示器上,

1608191089542626.jpg

單個視頻顯示效果如下:

1608191090826430.jpg

雙目視覺顯示效果:

1608191091643636.jpg

審核編輯:黃飛

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 連接器
    +關(guān)注

    關(guān)注

    98

    文章

    13844

    瀏覽量

    135078
  • 圖像處理
    +關(guān)注

    關(guān)注

    26

    文章

    1268

    瀏覽量

    56369
  • 嵌入式處理
    +關(guān)注

    關(guān)注

    0

    文章

    341

    瀏覽量

    9954
  • CMOS傳感器
    +關(guān)注

    關(guān)注

    4

    文章

    115

    瀏覽量

    24472
  • 核處理器
    +關(guān)注

    關(guān)注

    0

    文章

    12

    瀏覽量

    8692
收藏 人收藏

    評論

    相關(guān)推薦

    基于SoC的雙目視覺ADAS解決方案

    相比于單目視覺,雙目視覺(Stereo Vision)的關(guān)鍵區(qū)別在于可以利用雙攝像頭從不同角度對同一目標(biāo)成像,從而獲取視差信息,推算目標(biāo)距離。
    發(fā)表于 11-05 03:46 ?3196次閱讀

    鉅芯發(fā)布業(yè)內(nèi)首顆智能雙目視覺芯片

    據(jù)麥姆斯咨詢報道,物聯(lián)網(wǎng)及雙目視覺專家鉅芯發(fā)布了一款智能雙目立體視覺系統(tǒng),以及業(yè)內(nèi)首顆智能雙目
    的頭像 發(fā)表于 10-26 10:26 ?1w次閱讀

    1080P視頻開發(fā)平臺資料

    平臺采用TELECHIPS的TCC8901芯片,支持多種格式1080P視頻
    發(fā)表于 02-27 10:15

    【W(wǎng)RTnode2R申請】雙目視覺隨動平臺

    申請理由:之前用wrtnode的u***接雙攝像頭外加一個么mcu實(shí)現(xiàn)過一個一個雙目視覺隨動平臺,這樣太麻煩了,希望能用這個來實(shí)現(xiàn)一個更簡單的解決方案。項目描述:u***接雙攝像頭,mcu控制云臺。通過WIFI將雙目視覺傳遞到手
    發(fā)表于 09-10 11:25

    基于SoC的雙目視覺ADAS解決方案

    和帶寬能夠支持對雙路高達(dá)1080p@30fps圖像信號的實(shí)時處理,保證了雙路圖像信號的質(zhì)量和一致性。在雙目視覺ADAS應(yīng)用中,最大的挑戰(zhàn)來自于對兩路圖像進(jìn)行立體匹配和三維重構(gòu)所需要的巨大運(yùn)算量。以FCW
    發(fā)表于 08-12 15:15

    367-基于ZYNQ XC7Z100 FFG 900的高性能計算模塊解決方案

    基于ZYNQ XC7Z100 FFG 900的高性能計算模塊北京太速科技有限公司一、板卡概述 本板卡基于Xilinx公司的FPGA XC7Z100 FFG 9000 芯片, 該平臺為設(shè)
    發(fā)表于 12-19 15:06

    LabVIEW雙目視覺 【轉(zhuǎn)載】

    ` 本帖最后由 sszx2007 于 2020-3-2 17:04 編輯 LabVIEW雙目視覺原創(chuàng) 張冬斌 LabVIEW逆向工程高級編程 轉(zhuǎn)載至:https
    發(fā)表于 03-02 17:03

    zynq XC7Z100板卡學(xué)習(xí)資料:基于zynq XC7Z100 FMC接口通用計算平臺

    一、板卡概述本板卡基于Xilinx公司的FPGA XC7Z100 FFG 9000 芯片, 該平臺為設(shè)計和驗(yàn)證應(yīng)用程序提供了一個完整的開發(fā)平臺。該平臺使設(shè)計師能夠更加簡單進(jìn)行高性能的原
    發(fā)表于 03-24 09:39

    【MPS電源評估板試用申請】XC7Z100的PMBus供電系統(tǒng)設(shè)計

    項目名稱:XC7Z100的PMBus供電系統(tǒng)設(shè)計試用計劃:申請理由:研究PMBus芯片在Zynq7000系統(tǒng)中的應(yīng)用項目名稱:XC7Z100的PMBus供電系統(tǒng)設(shè)計計劃:1,使用PMbus電源板給
    發(fā)表于 06-18 13:40

    基于ZYNQ的機(jī)器視覺應(yīng)用

    的TLZ7x-EasyEVM評估板能夠很好的滿足工業(yè)機(jī)器視覺的圖像處理單元功能。TLZ7x-EasyEVM評估板芯片選型XC7Z020,兼容XC7Z
    發(fā)表于 09-16 15:52

    基于IMX214+ZYNQ XC7Z1001080P雙目視覺智能平臺

    雙目視覺智能平臺概述硬件資源1 FMC 雙目MIPI模塊FL0214FL0214模塊的參數(shù)說明 FL0214模塊的結(jié)構(gòu)圖FL0214模塊原理框圖模塊FMC LPC的引腳分配
    發(fā)表于 01-01 06:18

    Xilinx Zynq-7000特性參數(shù)

    CPUCPU為Xilinx Zynq-7000SOC,兼容XC7Z035/XC7Z045/XC7Z100平臺升級能力強(qiáng),以下為Xilinx
    發(fā)表于 12-30 07:55

    Xilinx Zynq-7000SOC的相關(guān)資料推薦

    CPUCPU為Xilinx Zynq-7000SOC,兼容XC7Z035/XC7Z045/XC7Z100,平臺升級能力強(qiáng),以下為Xilinx
    發(fā)表于 01-03 07:50

    米家智能攝像機(jī)1080P多少錢?米家智能攝像機(jī)1080P評測

    米家智能攝像機(jī) 1080P 可提供1080p全高清視頻拍攝與手機(jī)遠(yuǎn)程觀看能力,支持2.4G / 5G雙頻Wi-Fi,確保視頻傳輸流暢,即使觀看1080p視頻也不會卡頓。
    發(fā)表于 04-27 08:58 ?2913次閱讀

    基于Xilinx Zynq-7000系列XC7Z045/XC7Z100 SoC處理器設(shè)計

    TL6678ZH-EVM開發(fā)板基于TI KeyStone架構(gòu)C6000系列TMS320C6678八核C66x定點(diǎn)/浮點(diǎn)DSP,以及Xilinx Zynq-7000系列XC7Z045/XC7Z100 SoC處理器設(shè)計。
    發(fā)表于 10-19 15:00 ?3597次閱讀