0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

3D結(jié)構(gòu)光內(nèi)部硬件拆解

新機(jī)器視覺 ? 來源:簡書 ? 2023-11-13 16:11 ? 次閱讀

無論是結(jié)構(gòu)光、TOF還是雙目立體成像方案,主要的硬件包括紅外光發(fā)射器、紅外光攝像頭、可見光攝像頭和圖像處理芯片四部分,紅外攝像頭需要特制的窄帶濾色片,另外結(jié)構(gòu)光方案還需要在發(fā)射端添加光學(xué)棱鏡與光柵,雙目立體成像多一顆紅外光攝像頭。要了解他們涉及的工藝,首先就要對每一部分的功能和構(gòu)成做深入了解。我們以結(jié)構(gòu)光為例,對每一部分的構(gòu)成進(jìn)行拆解。

1 紅外發(fā)射器

紅外光發(fā)射部分是整個(gè)3D視覺重要的組件之一,用于發(fā)射經(jīng)過特殊調(diào)制的不可見紅外光至拍攝物體,其發(fā)射圖像的質(zhì)量對整個(gè)識(shí)別效果至關(guān)重要。

采用結(jié)構(gòu)光方案的 3D 視覺相比于 TOF 方案要復(fù)雜得多,主要是結(jié)構(gòu)光方案需要采用 pattern 圖像(如激光散斑等)進(jìn)行空間標(biāo)識(shí),因此需要定制的DOE(衍射光柵)和 WLO(晶圓級(jí)光學(xué)透鏡,包括擴(kuò)束元件、準(zhǔn)直元件、投射透鏡等)。但實(shí)際上WLO要視情況而定,在我從事的VCSEL項(xiàng)目中,就只有準(zhǔn)直Lens,沒有擴(kuò)束元件和投射透鏡。

wKgaomVR2raAFefZAABo1jvYkM8882.jpg

整個(gè)不可見光紅外線(IR)發(fā)射模組的工作流程主要為:

1)不可見紅外光發(fā)射源(激光器或者LED)發(fā)射出不可見紅外光;

2)不可見紅外光通過準(zhǔn)直鏡頭進(jìn)行校準(zhǔn);

3)校準(zhǔn)后的不可見紅外光通過光學(xué)衍射元件(DOE)進(jìn)行散射,進(jìn)而得到所需的散斑圖案。因?yàn)樯邎D案發(fā)射角度有限,所以需要光柵將散斑圖案進(jìn)行衍射“復(fù)制”后,擴(kuò)大其投射角度。因此IR發(fā)射模組主要部件包括:不可見紅外光發(fā)射源(激光器或者LED)、準(zhǔn)直鏡頭(WLO)、光學(xué)衍射元件(DOE)。

1.1 近紅外光源選擇,VCSEL是最佳方案

目前,可以提供 800-1000nm 波段的近紅外光源主要有三種:紅外LED、紅外LD-EEL(邊發(fā)射激光二極管)和VCSEL(垂直腔面發(fā)射激光器)。

VCSEL 可以說是紅外激光LD的一種,全名為垂直共振腔表面放射激光器,顧名思義,它采用垂直發(fā)射模式,與其他紅外LD的邊發(fā)射模式不同。

VCSEL的垂直結(jié)構(gòu)更加適合進(jìn)行晶圓級(jí)制造和封測,規(guī)模量產(chǎn)之后的成本相比于邊發(fā)射LD有優(yōu)勢,可靠性高,沒有傳統(tǒng)的激光器結(jié)構(gòu)如暗線缺陷的失效模式。相比于LED,VCSEL的光譜質(zhì)量高,中心波長溫漂小,響應(yīng)速度快,優(yōu)勢明顯。

邊發(fā)射EEL激光二極管LD結(jié)構(gòu)圖

wKgZomVR2reAdqS5AAA6AToGg0c113.jpg

垂直發(fā)射模式VCSEL結(jié)構(gòu)圖

wKgZomVR2raAUtN3AAA_vD_1hj0046.jpg

三種主流近紅外光發(fā)射光源優(yōu)劣對比:

wKgaomVR2raAc6waAABeMmEvVjU736.jpg

綜合分析三種方案,LED 雖然成本低,但是發(fā)射光角度大,必須輸出更多的功率以克服損失。此外,LED 不能快速調(diào)制,限制了分辨率,需要增加閃光持續(xù)時(shí)間;邊發(fā)射LD 也是手勢識(shí)別的可選方案(如DFB),但是輸出功率固定,邊緣發(fā)射的模式在制造工藝方面兼容性不好;VCSEL 比 LD-EEL 的優(yōu)勢在于所需的驅(qū)動(dòng)電壓和電流小,功耗低,光源可調(diào)變頻率更高(可達(dá)數(shù) GHz),與化合物半導(dǎo)體工藝兼容,適合大規(guī)模集成制造。尤其是 VCSEL 功耗低、可調(diào)頻率高、垂直發(fā)射的優(yōu)點(diǎn),使其比 LD-EEL 更加適合消費(fèi)電子智能終端。

1.2 晶圓級(jí)光學(xué)元件WLO是核心組件

WLO 晶圓級(jí)光學(xué)器件,是指晶元級(jí)鏡頭制造技術(shù)和工藝。與傳統(tǒng)光學(xué)器件的加工技術(shù)不同,WLO 工藝在整片玻璃晶元上,用半導(dǎo)體工藝批量復(fù)制加工鏡頭,多個(gè)鏡頭晶元壓合在一起,然后切割成單顆鏡頭,具有尺寸小、高度低、一致性好等特點(diǎn)。光學(xué)透鏡間的位置精度達(dá)到 nm 級(jí)。

傳統(tǒng)光學(xué)鏡頭與晶圓級(jí)鏡頭對比

wKgZomVR2raAUUIxAABTcssnpaY549.jpg

在 3D 視覺發(fā)射端結(jié)構(gòu)復(fù)雜的情況下,光學(xué)器件采用 WLO 工藝,可以有效縮減體積空間,同時(shí)器件的一致性好,光束質(zhì)量高,采用半導(dǎo)體工藝在大規(guī)模量產(chǎn)之后具有成本優(yōu)勢,是未來標(biāo)準(zhǔn)化的光學(xué)透鏡組合的最佳選擇。

由于WLO 工藝由于是采用半導(dǎo)體工藝和設(shè)計(jì)思路進(jìn)行光學(xué)器件的制造,因此整個(gè)流程更加復(fù)雜,無論是設(shè)計(jì)流程還是加工環(huán)節(jié),都需要更加先進(jìn)的設(shè)計(jì)思路和更加精細(xì)的加工處理。

1.3 DOE對于結(jié)構(gòu)光方案至關(guān)重要

在3D視覺結(jié)構(gòu)光方案中,經(jīng)過準(zhǔn)直鏡頭校準(zhǔn)后的激光束并沒有特征信息,必須采用特定的 pattern 光學(xué)圖案(如激光散斑等)實(shí)現(xiàn)深度信息的測量,因此下一步需要對激光束進(jìn)行調(diào)制,使其具備特征結(jié)構(gòu),光學(xué)衍射元件(DOE)就是用來完成這一任務(wù)的。

VCSEL射出的激光束經(jīng)準(zhǔn)直后,通過DOE進(jìn)行散射,即可得到所需的散斑圖案。由于DOE對于光束進(jìn)行散射的角度(FOV)有限,所以需要光柵將散斑圖案進(jìn)行衍射“復(fù)制”后,擴(kuò)大其投射角度。

wKgZomVR2raAf3I2AAAsZzCBGjU953.jpg

DOE 衍射光學(xué)元件(Diffractive Optical Elements)是基于光的衍射原理,利用計(jì)算機(jī)輔助設(shè)計(jì),并通過半導(dǎo)體芯片制造工藝,在基片上(或傳統(tǒng)光學(xué)器件表面)刻蝕產(chǎn)生臺(tái)階型或連續(xù)浮雕結(jié)構(gòu)(一般為光柵結(jié)構(gòu)),形成同軸再現(xiàn)、且具有極高衍射效率的一類光學(xué)元件。通過不同的設(shè)計(jì)來控制光束的發(fā)散角和形成光斑的形貌,實(shí)現(xiàn)光束形成特定圖案的功能。

2 不可見光紅外線(IR)接收模組

在3D結(jié)構(gòu)光方案中,RX紅外接收部分主要為一顆紅外攝像頭,用于接收被物體反射的紅外光,采集空間信息。該紅外攝像頭主要包括三部分:紅外CMOS傳感器、光學(xué)鏡頭、紅外窄帶干涉濾色片。

在基本結(jié)構(gòu)上與目前主流的可見光攝像頭類似,但是在具體的零部件方面存在差異:

1)可見光CMOS傳感器需要識(shí)別RGB三色,對分辨率的要求高,紅外CMOS只需要識(shí)別近紅外光,分辨率要求不高;

2)可見光攝像頭需要紅外截止濾色片將紅外光截止掉,只通過可見光,而紅外攝像頭只通過特定波段的近紅外光,而將可見光截止掉,因此需要窄帶濾色片;

3)由于可見光攝像頭對圖像分辨率要求高,因此光學(xué)鏡頭的設(shè)計(jì)非常復(fù)雜,紅外攝像頭對光學(xué)鏡頭的要求不高。

紅外攝像頭主要結(jié)構(gòu)

wKgZomVR2raAJfFrAAAmoXkWC80184.jpg

典型可見光攝像頭基本構(gòu)成

wKgaomVR2raAC4FcAAAlKyi7L4A013.jpg

2.1 特制紅外CMOS

在 3D 視覺方案中,紅外 CMOS的要求是其能接受被拍攝物體發(fā)射回來的紅外散斑圖案,不需要對其他波長的光線進(jìn)行成像。

2.2窄帶濾光片

在IR發(fā)送端,VCSEL發(fā)射的是940nm波長的紅外光,因此在接受端需要將940nm以外的環(huán)境光剔除,讓接受端的特制紅外CMOS只接收到940nm的紅外光。為達(dá)到這一目的,需要用到窄帶濾光片。

所謂窄帶濾光片,就是在特定的波段允許光信號(hào)通過,而偏離這個(gè)波段以外的兩側(cè)光信號(hào)被阻止。窄帶濾光片主要采用干涉原理,需要幾十層光學(xué)鍍膜構(gòu)成,相比普通的RGB吸收型濾光片具有更高的技術(shù)難度和產(chǎn)品價(jià)格。這個(gè)鏡片在國內(nèi),很大部分由水晶光電提供。

wKgZomVR2reAChHBAAA4oI9Qmc4223.jpg

2.3 接收端鏡頭(Lens)

接收端鏡頭為普通鏡頭,業(yè)內(nèi)方案成熟,各個(gè)廠商都能提供。

總體而言,接收端除窄帶濾波片較特殊,制造難度較高外,特制紅外CMOS和鏡頭都是成熟產(chǎn)品,不存在制造難度。

3 可見光攝像頭

可見光鏡頭模組,采用普通鏡頭模組,用于2D彩色圖片拍攝,非新增業(yè)務(wù)。

在 3D 視覺體系中,無論是結(jié)構(gòu)光方案,還是 TOF 方案,紅外光線的作用都是采集深度 Z 軸信息,從而確定物體的景深信息,而物體的平面 XY 軸信息需要借助普通可見光攝像頭進(jìn)行采集。

wKgZomVR2raAGrzNAABPK2InP8s611.jpg

4 圖像處理芯片

圖像處理芯片,將普通鏡頭模組拍攝的2D彩色圖片和IR接收模組獲取的3D信息集合,通過復(fù)雜的算法將IR接收端采集的空間信息和鏡頭成像端采集的色彩信息相結(jié)合,生成具備空間信息的三維圖像。

wKgaomVR2raAeZgoAABMUfX5Rgc294.jpg

該芯片設(shè)計(jì)壁壘高,尤其是算法層面的要求較高,需要根據(jù)3D視覺方案處理深度信息,目前僅有少數(shù)幾家公司擁有該技術(shù)。

好了,3D成像技術(shù)的硬件構(gòu)成我們?nèi)坎鸾馇宄耍偨Y(jié)成下圖,有了這個(gè)基礎(chǔ),再找其供應(yīng)商就是對號(hào)入座的事情了

wKgaomVR2reAakDPAAAyOfjNLpg673.jpg

作者:駿馬識(shí)途 來源:簡書

審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 攝像頭
    +關(guān)注

    關(guān)注

    59

    文章

    4793

    瀏覽量

    95272
  • 紅外發(fā)射器
    +關(guān)注

    關(guān)注

    0

    文章

    46

    瀏覽量

    16197
  • TOF
    TOF
    +關(guān)注

    關(guān)注

    9

    文章

    475

    瀏覽量

    36224
  • 3D結(jié)構(gòu)光
    +關(guān)注

    關(guān)注

    0

    文章

    12

    瀏覽量

    418

原文標(biāo)題:想了解3D結(jié)構(gòu)光,看這份拆解就對了!

文章出處:【微信號(hào):vision263com,微信公眾號(hào):新機(jī)器視覺】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    3D掃描的結(jié)構(gòu)

    ,它對于計(jì)算的要求通常比較嚴(yán)格,并且對于環(huán)境光照條件很敏感。另外一個(gè)方法采用結(jié)構(gòu)照明圖形,它只需一個(gè)投影儀(用于生成圖形)以及一個(gè)單攝像頭和計(jì)算能力中等的算法。 結(jié)構(gòu)
    發(fā)表于 08-30 14:51

    使用結(jié)構(gòu)3D掃描介紹

    隨著很多全新技術(shù)的涌現(xiàn),人們越來越需要用3D方法來表示現(xiàn)實(shí)世界中的物體。特別是機(jī)器視覺和機(jī)器人技術(shù),它們都得益于精確和自適應(yīng)的3D捕捉功能。其它針對3D掃描的應(yīng)用包括生物識(shí)別、安防、工業(yè)檢查、質(zhì)量
    發(fā)表于 11-16 07:48

    首發(fā)3D結(jié)構(gòu)人臉識(shí)別技術(shù),云從科技為身份識(shí)別再筑防火墻

    云從科技全新3D結(jié)構(gòu)人臉識(shí)別系統(tǒng)基于“飛龍II”深度學(xué)習(xí)結(jié)構(gòu)算法與3D
    的頭像 發(fā)表于 03-19 15:16 ?6319次閱讀

    OPPO實(shí)現(xiàn)了全球首個(gè)基于3D結(jié)構(gòu)技術(shù)的5G視頻通話演示

    此外,3D效、3D AR、3D游戲等,也都將是奧比中3D
    的頭像 發(fā)表于 06-20 17:48 ?4627次閱讀

    OPPO Find X的FaceKey 3D結(jié)構(gòu)給力 期待oppo findx蘭博基尼版

    OPPO更是帶來OPPO FaceKey 3D結(jié)構(gòu),通過在人臉建立15000個(gè)識(shí)別點(diǎn),帶來遠(yuǎn)比指紋更安全的解鎖和支付體驗(yàn)?;?b class='flag-5'>3D結(jié)構(gòu)
    的頭像 發(fā)表于 07-20 12:17 ?3731次閱讀

    vivo宣稱新品采用3D ToF技術(shù),是否比3D結(jié)構(gòu)更勝一籌?

    主流的人臉識(shí)別有哪些?你肯定回答2D紅外和3D結(jié)構(gòu),但是近日vivo宣稱下半年將推出3D ToF,運(yùn)用到vivo新品中,并量產(chǎn)商用。是不是
    發(fā)表于 07-11 05:16 ?2001次閱讀

    3d結(jié)構(gòu)的手機(jī)OPPOFindX體驗(yàn) OPPO FaceKey 3D結(jié)構(gòu)光在安卓機(jī)的首次量產(chǎn)

    3d結(jié)構(gòu)的手機(jī)OPPO Find X體驗(yàn)太給力,OPPO Find X采用了高端旗艦產(chǎn)品上才能見到的3D結(jié)構(gòu)
    的頭像 發(fā)表于 07-24 09:05 ?7258次閱讀

    丘鈦科技:3D結(jié)構(gòu)已實(shí)現(xiàn)量產(chǎn),3D TOF模組具備量產(chǎn)能力

    017年,蘋果發(fā)布iPhone X,基于3D結(jié)構(gòu)技術(shù)推出"Face ID"的生物識(shí)別技術(shù),支持人臉解鎖和人臉支付等新功能,帶火了一波3D結(jié)構(gòu)
    的頭像 發(fā)表于 08-23 17:42 ?1.4w次閱讀

    從HUAWEI Mate 20 Pro到3D結(jié)構(gòu)最全應(yīng)用

    HUAWEI Mate 20 Pro采用2400萬前置攝像頭,擁有3D結(jié)構(gòu)設(shè)計(jì),3D智能美顏,自拍清晰自然;同時(shí)支持3D人臉解鎖,帶來毫秒
    發(fā)表于 03-08 10:57 ?3064次閱讀

    淺析3D結(jié)構(gòu)技術(shù)

    HUAWEI Mate 20 Pro采用2400萬前置攝像頭,擁有3D結(jié)構(gòu)設(shè)計(jì),3D智能美顏,自拍清晰自然;同時(shí)支持3D人臉解鎖,帶來毫秒
    的頭像 發(fā)表于 10-23 15:55 ?2.1w次閱讀

    華為P30或?qū)⒅С?b class='flag-5'>3D結(jié)構(gòu)人臉識(shí)別

    按照以往的情況來看,要使用3D結(jié)構(gòu)人臉識(shí)別,采用水滴屏的手機(jī)是不太可能支持3D結(jié)構(gòu)人臉識(shí)別。
    發(fā)表于 01-29 09:20 ?5512次閱讀

    3D結(jié)構(gòu)相機(jī)的工作原理及優(yōu)點(diǎn)

    結(jié)構(gòu)3D相機(jī),一般指采用多幅條紋光柵,即先通過光柵投射模組按照時(shí)間序列依次投射在被測物體表面,再通過雙目對物體表面的光柵進(jìn)行拍照,基于事先編碼規(guī)則進(jìn)行解碼和雙目視差匹配,從而獲得高精度的3D
    發(fā)表于 04-22 10:10 ?6217次閱讀

    采用DLP 3D結(jié)構(gòu)軟件開發(fā)套件的3D打印機(jī)

    電子發(fā)燒友網(wǎng)站提供《采用DLP 3D結(jié)構(gòu)軟件開發(fā)套件的3D打印機(jī).zip》資料免費(fèi)下載
    發(fā)表于 09-07 11:24 ?5次下載
    采用DLP <b class='flag-5'>3D</b><b class='flag-5'>結(jié)構(gòu)</b><b class='flag-5'>光</b>軟件開發(fā)套件的<b class='flag-5'>3D</b>打印機(jī)

    3D視覺主要技術(shù)路徑 3D結(jié)構(gòu)技術(shù)原理

    3D傳感器作為3D視覺的眼睛,通過多個(gè)攝像頭與深度傳感器的組合能夠獲得物體三維位置及尺寸等數(shù)據(jù),實(shí)現(xiàn)三維信息采集。目前3D視覺傳感器主要有雙目相機(jī)、結(jié)構(gòu)
    發(fā)表于 11-22 21:21 ?3584次閱讀

    工業(yè)鏡頭在3D結(jié)構(gòu)檢測中實(shí)際應(yīng)用

    工業(yè)鏡頭在3D結(jié)構(gòu)檢測中實(shí)際應(yīng)用
    的頭像 發(fā)表于 06-01 08:34 ?266次閱讀
    工業(yè)鏡頭在<b class='flag-5'>3D</b><b class='flag-5'>結(jié)構(gòu)</b><b class='flag-5'>光</b>檢測中實(shí)際應(yīng)用