0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

最近有種單幀HDR技術(shù),能讓手機(jī)攝影低功耗+無(wú)偽影

手機(jī)技術(shù)資訊 ? 來(lái)源:手機(jī)技術(shù)資訊 ? 2023-10-13 15:35 ? 次閱讀

HDR(High Dynamic Range,高動(dòng)態(tài)范圍)仿佛是成像領(lǐng)域永恒的話題——感覺(jué)每年都有手機(jī)廠商在宣傳自家手機(jī)攝像頭拍照、拍視頻,獲得的畫(huà)面寬容度能有多廣。這兩年,不僅手機(jī)夜間成像能不能拍到燈箱細(xì)節(jié)成為旗艦機(jī)的必考題,視頻拍攝HDR也已經(jīng)成為手機(jī)OEM廠商爭(zhēng)搶的高地。

一般我們說(shuō),這里的動(dòng)態(tài)范圍是指成像系統(tǒng)在一幅圖像里能夠同時(shí)體現(xiàn)高光和陰影部分內(nèi)容的能力。誰(shuí)都希望即便在場(chǎng)景的亮處和暗處光比很大時(shí),手機(jī)攝像頭的最終呈現(xiàn)依舊游刃有余。隨這些年CMOS圖像傳感器工藝技術(shù)進(jìn)步,以及后端數(shù)字信號(hào)處理算力的提升,各種不同的HDR技術(shù)走得都還是比較快。

比如常見(jiàn)的所謂時(shí)域多幀HDR技術(shù),就是相機(jī)針對(duì)同場(chǎng)景,連續(xù)拍下欠曝到過(guò)曝的多張圖像,最后做圖像的多幀合成,輸出一張高動(dòng)態(tài)范圍HDR圖像。再比如DOL/Staggered HDR,傳感器每行像素以長(zhǎng)短曝光先后輸出,實(shí)現(xiàn)“準(zhǔn)同時(shí)”的不同亮度的信號(hào),獲取最終的HDR畫(huà)面。還有大小pixel分離結(jié)構(gòu),不同尺寸的像素獲得不同的感光信號(hào),覆蓋不同動(dòng)態(tài)范圍。..。..

今年8月,格科微宣布發(fā)布業(yè)界首款DAG單幀高動(dòng)態(tài)1300萬(wàn)像素圖像傳感器GC13A2。這里的DAG(Dual Analog Gain)又是一類實(shí)現(xiàn)照片與視頻HDR的技術(shù)。在我們看來(lái),這款產(chǎn)品有幾個(gè)關(guān)鍵詞。

其一是“單幀HDR”,并非手機(jī)拍照常見(jiàn)的多幀合成HDR;其二是從GC13A2的規(guī)格來(lái)看,1300萬(wàn)像素分辨率,1/3.1英寸大小,單像素尺寸1.12μm,可見(jiàn)格科微將真正的視頻HDR技術(shù),下放到了入門(mén)或中端手機(jī)設(shè)備上——大概明年,大部分手機(jī)都能普及此前旗艦手機(jī)才有的視頻HDR了。

我們來(lái)看看格科微的DAG HDR究竟是怎樣一種技術(shù),效果如何。

DAG VS 多幀合成

傳統(tǒng)的時(shí)域多幀HDR,如前文所述,就是以不同的曝光參數(shù),拍下多張圖像,最終對(duì)齊合成——欠曝的畫(huà)面照顧到了亮部細(xì)節(jié),而過(guò)曝的畫(huà)面則能夠較好地呈現(xiàn)暗部細(xì)節(jié)。合成以后也就有了HDR效果。

這類方案的缺陷主要是,即便拍攝多張照片或多幀影像的時(shí)間間隔很短,“多幀”的這些畫(huà)面,畢竟仍然是不同時(shí)間拍攝的:那么當(dāng)移動(dòng)中取景或畫(huà)面存在高速運(yùn)動(dòng)對(duì)象時(shí),就會(huì)產(chǎn)生運(yùn)動(dòng)偽像或鬼影。無(wú)論是拍照還是拍視頻,后端都需要對(duì)偽像再做處理。

即便現(xiàn)在包括AI在內(nèi)的技術(shù)可用于消除運(yùn)動(dòng)偽像,多幀合成依然存在局限性。比如說(shuō)要求AI模型有足夠廣的覆蓋度,算法效果也未必理想;后期消除偽像,系統(tǒng)成本會(huì)隨之提升——成本敏感型設(shè)備承受不了;影像拍攝的系統(tǒng)功耗也可能不理想。

那么很自然的,單幀HDR成為一個(gè)值得發(fā)展的方向。格科微選擇的就是自研DAG HDR。格科微在資料中說(shuō),這項(xiàng)技術(shù)是基于單幀畫(huà)面,針對(duì)畫(huà)面暗部使用高模擬增益,使得暗部“更清晰,更有質(zhì)感”,針對(duì)亮部使用低模擬增益,避免過(guò)曝。那么就能最終輸出HDR圖像。DAG的Dual Analog Gain應(yīng)該就是指這兩種增益了。

格科微告訴我們,所謂的“analog gain”模擬增益,是在ADC環(huán)節(jié)部分的增益,“暗部用一種gain,亮部用一種gain”基于對(duì)不同位置曝光的判斷,“在傳感器內(nèi)部就完成整個(gè)過(guò)程”,“只輸出一幀畫(huà)面”。據(jù)說(shuō)這種方案通過(guò)較小的成本增加,帶來(lái)近10dB的動(dòng)態(tài)范圍提升。

DAG HDR至少在拍照的三個(gè)方面提升了動(dòng)態(tài)范圍,拍攝畫(huà)面預(yù)覽、拍照、拍視頻。畫(huà)面預(yù)覽很容易理解:因?yàn)镈AG HDR是單幀HDR,那么理論上在例如手機(jī)拍照時(shí),按下快門(mén)前,拍照界面的畫(huà)面預(yù)覽就已經(jīng)能夠看到HDR效果。

比如下面這組預(yù)覽取景對(duì)比,分別是GC13A2的DAG HDR畫(huà)面(右),以及另外一款同樣1/3.06“ 1300萬(wàn)像素圖像傳感器輸出的常規(guī)10bit畫(huà)面(左)。注意水面暗部細(xì)節(jié),及大樓外屏亮部細(xì)節(jié)對(duì)比,可以明顯發(fā)現(xiàn)DAG HDR還原的動(dòng)態(tài)范圍更大,高亮的霓虹燈幾乎沒(méi)有過(guò)曝。

66f8ec1c-695c-11ee-939d-92fbcf53809c.png

左圖:普通預(yù)覽 右圖:DAG HDR 預(yù)覽

看看DAG實(shí)際效果怎么樣

當(dāng)然,即便應(yīng)用了單幀HDR技術(shù),仍然可以借助時(shí)域多幀HDR來(lái)更進(jìn)一步提升畫(huà)面動(dòng)態(tài)范圍。好處在于,用了單幀HDR的傳感器,在做多幀合成時(shí),合成數(shù)量減少、功耗降低。

當(dāng)用于照片拍攝時(shí),相較傳統(tǒng)10bit方案,需要3幀合成的場(chǎng)景減少了50%。在格科微的高光比測(cè)試場(chǎng)景內(nèi),沒(méi)有單幀HDR方案的圖像傳感器拍照時(shí),在60%的情況下需要進(jìn)行3幀合成才能獲得HDR效果;而一旦有了DAG HDR的加持,那么80%的場(chǎng)景都只需要做2幀合成,10%的情況下用單幀就保留了高動(dòng)態(tài)范圍,還有10%才考慮用3幀合成。

670db2c8-695c-11ee-939d-92fbcf53809c.png

左圖:傳統(tǒng) HDR 拍照 右圖:DAG HDR 拍照

下面這組圖是GC13A2在打開(kāi)DAG HDR以后,正常曝光與2幀合成的照片,以及關(guān)閉DAG HDR時(shí)的正常曝光與3幀合成照片效果對(duì)比。從背景抓娃娃機(jī)的燈光呈現(xiàn),以及減少的合成幀數(shù),這組對(duì)比還是能夠明確感受到DAG HDR的威力的。

671a1b8a-695c-11ee-939d-92fbcf53809c.png

左組圖:DAG HDR OFF 右組圖:DAG HDR ON

那么對(duì)應(yīng)的,多幀合成的任務(wù)減少,一方面更好地抗運(yùn)動(dòng)偽像和鬼影,另一方面則讓系統(tǒng)功耗得到大幅縮減——對(duì)手機(jī)這樣的功耗敏感型設(shè)備而言有價(jià)值。運(yùn)動(dòng)偽像的消除,可從下面這個(gè)快速搖擺的運(yùn)動(dòng)對(duì)象拍攝看得出來(lái)。

672b0fc6-695c-11ee-939d-92fbcf53809c.png

左圖:多幀合成拍照 右圖:DAG HDR單幀拍照

值得一提的是,實(shí)際上DAG這類單幀HDR方案,在功耗更低和無(wú)鬼影的問(wèn)題上,也比隔行長(zhǎng)短曝光之類的“準(zhǔn)同時(shí)”多曝光方案有優(yōu)勢(shì)。格科微似乎也在內(nèi)部測(cè)試中對(duì)比了stagger HDR,以表現(xiàn)DAG的明確優(yōu)勢(shì)。

67301142-695c-11ee-939d-92fbcf53809c.gif

左:stagger HDR 右:DAG HDR

另外在視頻拍攝上,GC13A2可以全時(shí)低功耗輸出12bit高動(dòng)態(tài)范圍圖像和4K 30fps視頻。在視頻拍攝時(shí),單幀輸出就能獲得比較理想的HDR效果。一方面在圖像傳感器層面,將HDR視頻真正帶到了入門(mén)手機(jī)之上;另外實(shí)現(xiàn)HDR視頻的同時(shí),因?yàn)槠陂g沒(méi)有采用多幀合成,所以功耗減少了大約30-40%,也避免了多幀合成的運(yùn)動(dòng)偽像問(wèn)題。

在后端算力平臺(tái)支持12bit數(shù)據(jù)處理時(shí),這顆傳感器就能將12bit數(shù)據(jù)完整輸出;考慮入門(mén)平臺(tái)不支持12bit數(shù)據(jù)的情況,則GC13A2也能通過(guò)global-tone-mapping算法,將數(shù)據(jù)壓縮到10bit——雖說(shuō)做了數(shù)據(jù)位壓縮,但畫(huà)面亮部與暗部細(xì)節(jié)仍有保留,所以仍有HDR效果。

未來(lái)會(huì)擴(kuò)展到高端定位和其他市場(chǎng)

DAG HDR技術(shù)在格科微內(nèi)部的研發(fā),前后總共可能歷經(jīng)了3-5年。這項(xiàng)技術(shù)的難點(diǎn)在“電路、算法方面的經(jīng)驗(yàn)積累”上。據(jù)說(shuō)在格科微更早期的傳感器產(chǎn)品上,就有對(duì)應(yīng)技術(shù)的“試驗(yàn)”。到現(xiàn)如今正式量產(chǎn),克服了不少難點(diǎn)。

格科微將GC13A2定位于手機(jī)、平板電腦之類的移動(dòng)設(shè)備。未來(lái)格科微也考慮將DAG HDR技術(shù)應(yīng)用到更高端定位的傳感器產(chǎn)品上。“這項(xiàng)技術(shù)發(fā)布以后,未來(lái)入門(mén)級(jí)智能手機(jī)產(chǎn)品都能用上HDR視頻拍攝和預(yù)覽?!备窨莆⑾嚓P(guān)市場(chǎng)負(fù)責(zé)人在接受采訪時(shí)說(shuō),“1300萬(wàn)像素是能最快實(shí)現(xiàn)量產(chǎn)的產(chǎn)品。后續(xù)將技術(shù)復(fù)制到其他產(chǎn)品上也不會(huì)有問(wèn)題。”

甚至未來(lái)格科微推出的大部分傳感器產(chǎn)品,都考慮將DAG或者其他HDR技術(shù)作為標(biāo)配。通過(guò)在更高性能的產(chǎn)品上搭載DAG技術(shù),也能進(jìn)一步拉高品牌定位。

尤為值得一提的是,今年6月,格科微在安博會(huì)上發(fā)布了一款面向智慧城市、智能家居、會(huì)議系統(tǒng)等的GC8613傳感器。規(guī)格上,除了4K分辨率以外,這顆傳感器就已經(jīng)率先實(shí)現(xiàn)了DAG HDR單幀高動(dòng)態(tài)。這是DAG HDR技術(shù)還可應(yīng)用于更多市場(chǎng)的佐證。

格科微告訴我們,無(wú)論GC13A2還是GC8613,都已經(jīng)有客戶引入或做評(píng)估。GC13A2大概率明年就能在手機(jī)產(chǎn)品上看得到。

從這些年格科微布局sensor shift OIS光學(xué)防抖方案,再到COM封裝技術(shù)(錫焊COB)等,都能看出格科微在技術(shù)儲(chǔ)備上的努力。據(jù)說(shuō)當(dāng)前格科微針對(duì)HDR技術(shù)還在做進(jìn)一步的深入和研究,很快大約也能看到DAG之外的其他成果。從格科微的時(shí)間和技術(shù)沉淀投入還是能夠看出這家公司入駐高端市場(chǎng)的決心和實(shí)力的。

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • CMOS
    +關(guān)注

    關(guān)注

    58

    文章

    5621

    瀏覽量

    234491
  • 圖像傳感器
    +關(guān)注

    關(guān)注

    68

    文章

    1827

    瀏覽量

    129244
  • HDR
    HDR
    +關(guān)注

    關(guān)注

    4

    文章

    272

    瀏覽量

    31904

原文標(biāo)題:最近有種單幀HDR技術(shù),能讓手機(jī)攝影低功耗+無(wú)偽影

文章出處:【微信號(hào):Mobile-Info,微信公眾號(hào):手機(jī)技術(shù)資訊】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    德國(guó)進(jìn)口蔡司工業(yè)CT去散射技術(shù)

    CT始終是制約分析、數(shù)據(jù)處理、可靠性以及準(zhǔn)確度的重大難題。毋庸置疑,的種類繁多,像是射線硬化、多材料、散射或者環(huán)狀等均在其列。今日,要與諸位分享的乃是鋁壓鑄行業(yè)里最為常見(jiàn)的散射
    的頭像 發(fā)表于 09-04 11:20 ?180次閱讀
    德國(guó)進(jìn)口蔡司工業(yè)CT去散射<b class='flag-5'>偽</b><b class='flag-5'>影</b><b class='flag-5'>技術(shù)</b>

    xWRL6432低功耗雷達(dá)-功耗優(yōu)化技術(shù)

    電子發(fā)燒友網(wǎng)站提供《xWRL6432低功耗雷達(dá)-功耗優(yōu)化技術(shù).pdf》資料免費(fèi)下載
    發(fā)表于 08-23 09:17 ?0次下載
    xWRL6432<b class='flag-5'>低功耗</b>雷達(dá)-<b class='flag-5'>功耗</b>優(yōu)化<b class='flag-5'>技術(shù)</b>

    格科微量產(chǎn)第二代芯片3200萬(wàn)像素圖像傳感器GC32E2,搭載DAG升級(jí)HDR影像體驗(yàn)

    近日,格科微成功量產(chǎn)高性能的第二代芯片3200萬(wàn)像素圖像傳感器——GC32E2。GC32E2搭配高動(dòng)態(tài)DAG HDR技術(shù),預(yù)覽、拍照、
    發(fā)表于 06-19 16:16 ?967次閱讀
    格科微量產(chǎn)第二代<b class='flag-5'>單</b>芯片3200萬(wàn)像素圖像傳感器GC32E2,搭載DAG升級(jí)<b class='flag-5'>HDR</b>影像體驗(yàn)

    格科微量產(chǎn)第二代芯片3200萬(wàn)像素圖像傳感器GC32E2

    近日,格科微成功量產(chǎn)高性能的第二代芯片3200萬(wàn)像素圖像傳感器——GC32E2。GC32E2搭配高動(dòng)態(tài)DAG HDR技術(shù),預(yù)覽、拍照、
    的頭像 發(fā)表于 06-19 14:38 ?600次閱讀

    國(guó)產(chǎn)藍(lán)牙模組 | 低功耗藍(lán)牙應(yīng)用

    藍(lán)牙技術(shù)聯(lián)盟于2010年推出了藍(lán)牙4.0規(guī)范,其中低功耗藍(lán)牙的出現(xiàn)滿足了小型電池供電設(shè)備進(jìn)行低功耗無(wú)線連接的需求,因此得到廣泛應(yīng)用。本文章將帶你深入了解低功耗藍(lán)牙的應(yīng)用。
    的頭像 發(fā)表于 06-14 08:25 ?314次閱讀
    國(guó)產(chǎn)藍(lán)牙模組 | <b class='flag-5'>低功耗</b>藍(lán)牙應(yīng)用

    data scope(dscope)串口虛擬示波器最近有人用過(guò)嗎?

    data scope(dscope)串口虛擬示波器最近有人用過(guò)嗎? 好像在最近的win11系統(tǒng)上無(wú)法打開(kāi) 報(bào)“軟件被修改,即將終止運(yùn)行” 這個(gè)怎么解?
    發(fā)表于 05-17 08:51

    STM32F407 STOP模式低功耗的電流偏大怎么解決?

    大家好!最近有個(gè)項(xiàng)目用 STM32F407VGT6(100pin , 內(nèi)1MBFLASH)低功耗的電流偏大 , 程序 測(cè)試說(shuō)明如下: 1. STM32F407VGT6 只接了8M的高頻晶振和32K
    發(fā)表于 04-15 07:00

    Virtual Desktop 升級(jí):Quest 3 引入上半身追蹤,運(yùn)動(dòng)降低

     值得關(guān)注的是,高通驍龍Adreno Motion Engine功能近似于DLSS/FSR技術(shù),運(yùn)用AI估計(jì)用戶動(dòng)作來(lái)提升串流幀率,之前卻易導(dǎo)致運(yùn)動(dòng)過(guò)多。
    的頭像 發(fā)表于 03-19 10:59 ?532次閱讀

    Prophesee展示了新一代無(wú)模糊的手機(jī)攝影技術(shù)

    在世界移動(dòng)通信大會(huì)(MWC)上,基于與高通多年的合作沉淀,Prophesee展示了新一代無(wú)模糊的手機(jī)攝影技術(shù)
    的頭像 發(fā)表于 02-29 09:43 ?578次閱讀

    低功耗藍(lán)牙技術(shù)的特點(diǎn) 低功耗藍(lán)牙如何實(shí)現(xiàn)低功耗

    低功耗藍(lán)牙技術(shù)是一種優(yōu)化的藍(lán)牙技術(shù),專為滿足低功耗需求而設(shè)計(jì)。它通過(guò)采用一系列節(jié)能措施和技術(shù),實(shí)現(xiàn)了更低的
    的頭像 發(fā)表于 02-07 16:49 ?1527次閱讀

    低功耗藍(lán)牙技術(shù)發(fā)展勢(shì)頭強(qiáng)勁

    今天要跟大家討論的是低功耗藍(lán)牙技術(shù)(BLE)。就字面意思來(lái)說(shuō),與經(jīng)典的藍(lán)牙技術(shù)相比,低功耗藍(lán)牙技術(shù)勝在
    的頭像 發(fā)表于 01-20 10:32 ?1226次閱讀

    思特威發(fā)布超高像素1/1.28英寸圖像傳感器SC580XS

    據(jù)悉,SC580XS采用思特威PixGain HDR技術(shù),結(jié)合同一曝光下的像素高低轉(zhuǎn)換增益合成,實(shí)現(xiàn)大幅度的動(dòng)態(tài)范圍提升,并有效減少運(yùn)動(dòng)
    的頭像 發(fā)表于 01-11 14:23 ?774次閱讀

    最近有哪些新出的RISC-V開(kāi)發(fā)板試用

    最近有哪些RISC-V開(kāi)發(fā)板試用呀?或者有關(guān)的活動(dòng)。
    發(fā)表于 11-10 20:26

    低功耗WiFi模塊的技術(shù)發(fā)展

    隨著物聯(lián)網(wǎng)的迅速發(fā)展,對(duì)于低功耗設(shè)備和技術(shù)的需求日益增加。低功耗WiFi模塊應(yīng)運(yùn)而生,為連接大量設(shè)備提供了更長(zhǎng)的電池壽命和更可持續(xù)的能源解決方案。本文將深入研究低功耗WiFi模塊的
    的頭像 發(fā)表于 11-02 16:34 ?601次閱讀

    采用低功耗精密24位Σ-Δ型ADC全集成式熱電偶測(cè)量系統(tǒng)

    AD7124-4/AD7124-8是一個(gè)集成的熱電偶測(cè)量系統(tǒng),基于AD7124-4/AD7124-8低功耗、低噪聲、24位x1f-x1e型模數(shù)轉(zhuǎn)換器(ADC),針對(duì)高精度測(cè)量應(yīng)用而優(yōu)化。使用該系
    發(fā)表于 09-26 07:30