0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

RGBD相機(jī)的標(biāo)定和圖像配準(zhǔn)

新機(jī)器視覺 ? 來源:新機(jī)器視覺 ? 2023-08-22 14:58 ? 次閱讀

1

kinect2相機(jī)簡(jiǎn)介

1、三種主要相機(jī)類型

63c2b986-407d-11ee-ac96-dac502259ad0.png

2、常見的RGB-D相機(jī)

64092eac-407d-11ee-ac96-dac502259ad0.png

3、kinect2 相機(jī)

從左到右依次是:彩色攝像頭;紅外攝像頭(深度攝像頭),但這個(gè)要和再右邊的IR Project(紅外投射器)一起工作的;底下的長(zhǎng)條是麥克風(fēng),可以感受到說話人的方向

644d79c2-407d-11ee-ac96-dac502259ad0.png

3.1使用RGB-D相機(jī)的好處

可以直接通過拍攝的深度圖得到物體的空間位置

654246be-407d-11ee-ac96-dac502259ad0.png

3.2問題

keinect相機(jī) 彩色圖像是1920x1080的,但深度圖是512x414的,因此需要深度校準(zhǔn)

3.3實(shí)際標(biāo)定得到的數(shù)據(jù)

656a92cc-407d-11ee-ac96-dac502259ad0.png

2

內(nèi)外參標(biāo)定

1、針孔相機(jī)投影模型

659a9936-407d-11ee-ac96-dac502259ad0.png

656a92cc-407d-11ee-ac96-dac502259ad0.png

相機(jī)坐標(biāo)系 -> 物理成像平面

66020f94-407d-11ee-ac96-dac502259ad0.png

物理成像平面 -> 像素平面

66397fba-407d-11ee-ac96-dac502259ad0.png

總結(jié)一下

整個(gè)投影過程都可以通過下面的內(nèi)參矩陣描述 fx,fy,cx,cy

6666ace2-407d-11ee-ac96-dac502259ad0.png

主要通過k1,k2,k3三個(gè)參數(shù)來描述相機(jī)的徑向畸變(常用k1,k2就夠了)

668b8738-407d-11ee-ac96-dac502259ad0.png

對(duì)于切向畸變,一般使用p1,p2來描述

66c26b4a-407d-11ee-ac96-dac502259ad0.png

2、工具

66e4c4b0-407d-11ee-ac96-dac502259ad0.png

對(duì)于 kinect 可以用 iai_kinect2 工具包做標(biāo)定

3、棋盤標(biāo)定板

6706d7f8-407d-11ee-ac96-dac502259ad0.png

4、彩色相機(jī)標(biāo)定

67354818-407d-11ee-ac96-dac502259ad0.png

5、紅外相機(jī)標(biāo)定

67676aa0-407d-11ee-ac96-dac502259ad0.png

6、彩色相機(jī)和紅外相機(jī)的外參標(biāo)定

描述深度坐標(biāo)系下的點(diǎn)如何表示在RGB圖中

67b44cda-407d-11ee-ac96-dac502259ad0.png

7、深度相機(jī)的深度校準(zhǔn)

67fc26a4-407d-11ee-ac96-dac502259ad0.png

3

圖像配準(zhǔn)

1、配準(zhǔn)原理

(配準(zhǔn)后的深度圖不對(duì))

6831c08e-407d-11ee-ac96-dac502259ad0.png

正確

6882c4fc-407d-11ee-ac96-dac502259ad0.png

4

總結(jié)

68d7711e-407d-11ee-ac96-dac502259ad0.png

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 圖像
    +關(guān)注

    關(guān)注

    2

    文章

    1075

    瀏覽量

    40269
  • 相機(jī)
    +關(guān)注

    關(guān)注

    4

    文章

    1303

    瀏覽量

    53136

原文標(biāo)題:RGBD相機(jī)的標(biāo)定和圖像配準(zhǔn)

文章出處:【微信號(hào):vision263com,微信公眾號(hào):新機(jī)器視覺】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    基于DCC和張氏標(biāo)定相機(jī)鏡頭畸變校正

    電子發(fā)燒友網(wǎng)站提供《基于DCC和張氏標(biāo)定相機(jī)鏡頭畸變校正.pdf》資料免費(fèi)下載
    發(fā)表于 08-29 10:37 ?0次下載
    基于DCC和張氏<b class='flag-5'>標(biāo)定</b>的<b class='flag-5'>相機(jī)</b>鏡頭畸變校正

    工業(yè)相機(jī)測(cè)長(zhǎng)儀的組成部分

    的視野范圍內(nèi)時(shí),通過追蹤型材兩端在圖像中所處的位置即可測(cè)得型材的長(zhǎng)度。 在圖像處理方式的測(cè)量中,由于相機(jī)視野內(nèi)中間和邊緣的物像比例存在差異,僅僅依靠像素比例無法達(dá)到精確測(cè)量。系統(tǒng)內(nèi)外參數(shù)標(biāo)定
    發(fā)表于 08-27 17:45

    C#之Delta并聯(lián)機(jī)械手的視覺相機(jī)標(biāo)定與形狀匹配

    本文主要介紹如何通過正運(yùn)動(dòng)VPLC711視覺接口來實(shí)現(xiàn)相機(jī)標(biāo)定和形狀匹配功能。
    的頭像 發(fā)表于 06-26 15:11 ?642次閱讀
    C#之Delta并聯(lián)機(jī)械手的視覺<b class='flag-5'>相機(jī)</b><b class='flag-5'>標(biāo)定</b>與形狀匹配

    相機(jī)標(biāo)定技術(shù)的性能分析與工具比較

    相機(jī)在從遙感、測(cè)繪、機(jī)器人技術(shù)到內(nèi)窺鏡等一系列應(yīng)用中都是不可或缺的。這些應(yīng)用通常需要了解相機(jī)中真實(shí)世界點(diǎn)和它們?cè)?b class='flag-5'>圖像中的幾何關(guān)系。
    發(fā)表于 04-30 09:28 ?708次閱讀
    <b class='flag-5'>相機(jī)</b><b class='flag-5'>標(biāo)定</b>技術(shù)的性能分析與工具比較

    工業(yè)相機(jī)單目和雙目的區(qū)別

    工業(yè)相機(jī)標(biāo)定的方法根據(jù)工業(yè)相機(jī)的數(shù)目可分為單目標(biāo)定、雙目標(biāo)定Q以及多目標(biāo)定。
    的頭像 發(fā)表于 03-26 16:26 ?1342次閱讀
    工業(yè)<b class='flag-5'>相機(jī)</b>單目和雙目的區(qū)別

    相機(jī)標(biāo)定中的坐標(biāo)變換原理難點(diǎn)分析

    相機(jī)標(biāo)定中的基本坐標(biāo)系有:像素坐標(biāo)系、圖像坐標(biāo)系、相機(jī)坐標(biāo)系、世界坐標(biāo)系,這些坐標(biāo)系之間都有一定的轉(zhuǎn)換關(guān)系,若這些轉(zhuǎn)換關(guān)系已知,就可以得到世界坐標(biāo)(棋盤上的點(diǎn))和像素坐標(biāo)之間的關(guān)系。
    發(fā)表于 12-19 10:42 ?881次閱讀
    <b class='flag-5'>相機(jī)</b><b class='flag-5'>標(biāo)定</b>中的坐標(biāo)變換原理難點(diǎn)分析

    PCL濾波準(zhǔn)常用的濾波方式

    最近在看PCL濾波準(zhǔn)等操作,之前在自動(dòng)駕駛-激光雷達(dá)預(yù)處理/特征提取和提到了一些濾除點(diǎn)云等操作,但是最近作者發(fā)現(xiàn)里面還有一些準(zhǔn)的方法還沒有提到,所以這里重新開個(gè)章節(jié)來給大家列舉一些
    的頭像 發(fā)表于 11-28 11:24 ?461次閱讀

    采集激光雷達(dá)和相機(jī)的初始標(biāo)定數(shù)據(jù)

    包含了計(jì)算相機(jī)內(nèi)參,獲得標(biāo)定數(shù)據(jù),優(yōu)化計(jì)算外參和雷達(dá)相機(jī)融合應(yīng)用相關(guān)的代碼。 本方案中使用了標(biāo)定板角點(diǎn)作為標(biāo)定目標(biāo)物,由于Livox雷達(dá)非重
    的頭像 發(fā)表于 11-28 11:09 ?422次閱讀
    采集激光雷達(dá)和<b class='flag-5'>相機(jī)</b>的初始<b class='flag-5'>標(biāo)定</b>數(shù)據(jù)

    相機(jī)標(biāo)定中各種標(biāo)定板介紹以及優(yōu)缺點(diǎn)分析

    在選擇標(biāo)定板時(shí),一個(gè)重要的考慮因素是它的物理尺寸。這最終關(guān)系到最終應(yīng)用的測(cè)量視場(chǎng)(FOV)。這是因?yàn)?b class='flag-5'>相機(jī)需要聚焦在特定的距離上標(biāo)定。改變焦距長(zhǎng)度會(huì)輕微地影響對(duì)焦距離,這會(huì)影響之前的標(biāo)定
    的頭像 發(fā)表于 11-25 14:36 ?833次閱讀
    <b class='flag-5'>相機(jī)</b><b class='flag-5'>標(biāo)定</b>中各種<b class='flag-5'>標(biāo)定</b>板介紹以及優(yōu)缺點(diǎn)分析

    機(jī)器視覺:圖像準(zhǔn)方法分類

    基于特征的準(zhǔn)方法 主要是采用各種算法提取基準(zhǔn)圖像和實(shí)時(shí)圖像的特征,如邊緣、角點(diǎn)、曲率、不變矩等,然后對(duì)提取的特征進(jìn)行描述從而使其可以按照某種相似性測(cè)度進(jìn)行匹配。
    發(fā)表于 11-06 16:54 ?1855次閱讀
    機(jī)器視覺:<b class='flag-5'>圖像</b><b class='flag-5'>配</b><b class='flag-5'>準(zhǔn)</b>方法分類

    機(jī)器視學(xué)習(xí)筆記:圖像準(zhǔn)

    準(zhǔn)圖像與原圖像相比存在偏移、旋轉(zhuǎn)、比例等空間變換關(guān)系,圖像
    的頭像 發(fā)表于 10-24 09:27 ?892次閱讀
    機(jī)器視學(xué)習(xí)筆記:<b class='flag-5'>圖像</b><b class='flag-5'>配</b><b class='flag-5'>準(zhǔn)</b>

    相機(jī)標(biāo)定究竟在標(biāo)定什么?

    這個(gè)逼近的過程就是「相機(jī)標(biāo)定」,我們用簡(jiǎn)單的數(shù)學(xué)模型來表達(dá)復(fù)雜的成像過程,并且求出成像的反過程。標(biāo)定之后的相機(jī),可以進(jìn)行三維場(chǎng)景的重建,即深度的感知,這是計(jì)算機(jī)視覺的一大分支。
    的頭像 發(fā)表于 10-18 17:00 ?852次閱讀
    <b class='flag-5'>相機(jī)</b><b class='flag-5'>標(biāo)定</b>究竟在<b class='flag-5'>標(biāo)定</b>什么?

    基于激光雷達(dá)相機(jī)的在線外部標(biāo)定算法

    本文提出了一種自動(dòng)在線激光雷達(dá)相機(jī)標(biāo)定方法CFNet。CFNet是全自動(dòng)的,不需要特定的校準(zhǔn)場(chǎng)景、校準(zhǔn)目標(biāo)和初始校準(zhǔn)參數(shù)。我們定義一個(gè)校準(zhǔn)流來表示初始投影點(diǎn)的位置與地面真值之間的偏差。
    發(fā)表于 10-10 11:44 ?816次閱讀
    基于激光雷達(dá)<b class='flag-5'>相機(jī)</b>的在線外部<b class='flag-5'>標(biāo)定</b>算法

    常用視覺的三種相機(jī)標(biāo)定總結(jié)

    選中Export Camera Parameters按鈕,將計(jì)算得到的相關(guān)參數(shù)導(dǎo)入到Matlab中;若要進(jìn)行更精確的標(biāo)定,可在標(biāo)定時(shí)考慮畸變誤差或采用雙目相機(jī)標(biāo)定方法。
    發(fā)表于 10-09 10:51 ?1475次閱讀
    常用視覺的三種<b class='flag-5'>相機(jī)</b><b class='flag-5'>標(biāo)定</b>總結(jié)

    三維點(diǎn)云準(zhǔn)算法原理及推導(dǎo)

    準(zhǔn)就是再兩個(gè)點(diǎn)云還差得十萬八千里、完全不清楚兩個(gè)點(diǎn)云的相對(duì)位置關(guān)系的情況下,找到一個(gè)這兩個(gè)點(diǎn)云近似的旋轉(zhuǎn)平移矩陣(不一定很精確,但是已經(jīng)大概是對(duì)的了)。
    的頭像 發(fā)表于 09-25 11:31 ?809次閱讀