0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

揭開超畫質(zhì)黑科技的 “神秘面紗”

曠視MEGVII ? 來源:Megvii曠視科技 ? 作者:Megvii曠視科技 ? 2020-11-27 11:04 ? 次閱讀

發(fā)現(xiàn)美并記錄美,是烙印在人類血液里的本能反應(yīng)。從蒙昧?xí)r代的原始人在黑暗的洞穴中畫下野生動(dòng)物的第一筆涂鴉開始,繪畫的火花激勵(lì)著一代又一代人將美記錄,隨著歷史的巨輪滾滾向前,西方世界的繪畫向著古典主義對(duì)于細(xì)節(jié)的極致追求發(fā)展,而東方文明在山水寫意中感悟著天地宇宙的本心……圖像,對(duì)于人類來說,既在記錄現(xiàn)實(shí),也是人類思想的折射與反映。

從原始到現(xiàn)代的圖像轉(zhuǎn)變

科技始終伴隨著人類文明的發(fā)展,使生活更加美好與鮮活。1839年,法國人達(dá)蓋爾用兩個(gè)木箱拼湊出世界上第一臺(tái)相機(jī),這種全新的攝影技術(shù),漸漸地替代了繪畫,成為記錄美好瞬間的全新載體。如今181年過去了,形形色色的攝影攝像設(shè)備流淌過了人們的生活,無一例外,它們都忠實(shí)的履行了自己的使命——記錄生活,記錄美好。

在科技縱橫發(fā)展的今天,人們對(duì)于將美的瞬間停留又有了更加極致的追求——在任何環(huán)境下都可以絕對(duì)還原景物的真我本色。由此,曠視的超畫質(zhì)技術(shù)應(yīng)運(yùn)而生。超畫質(zhì)是一種通過高畫質(zhì)數(shù)碼相機(jī)的成像特性,還原景物原有的細(xì)節(jié)紋理的技術(shù),可以對(duì)畫面亮度、畫面對(duì)比度、畫面層次感、暗場細(xì)節(jié)、色彩精準(zhǔn)還原進(jìn)行升級(jí),從而使得畫面顯得通透,層次更加豐富,照片的“觀感”體驗(yàn)更加舒服。通俗點(diǎn)說,超畫質(zhì)技術(shù)就是讓相機(jī)自動(dòng)對(duì)照片進(jìn)行“完美PS”的過程。

如果我們用一句話來定義超畫質(zhì),那就應(yīng)該是:在絕對(duì)尊重畫面內(nèi)容的同時(shí),又賦予畫面超越基礎(chǔ)畫質(zhì)的美學(xué)提升。

揭開超畫質(zhì)黑科技的 “神秘面紗”

為了讓超畫質(zhì)技術(shù)能夠幫助大家拍出好照片,曠視的研發(fā)人員做了相當(dāng)多的嘗試,開發(fā)了100多種算法,實(shí)現(xiàn)了不少高級(jí)功能,我們就找?guī)讉€(gè)好理解的聊一聊。

|高動(dòng)態(tài)范圍HDR,真正實(shí)現(xiàn)“五彩斑斕的黑”

拍夜景的時(shí)候,常常會(huì)出現(xiàn)一個(gè)悖論,同一幅畫面里,我們既希望遠(yuǎn)處的天空背景暗一點(diǎn),又希望近處的景物亮一點(diǎn),這很難“一鍵解決”。曠視超畫質(zhì)技術(shù)中的高動(dòng)態(tài)范圍HDR,就是來解決這一矛盾的:它能夠讓圖像明亮的地方更亮,黑色的地方更暗,將同一個(gè)畫面里的亮度、色彩度處理得“更有層次”。

五彩斑斕的夜景

HDR是High Dynamic Range的縮寫,即高動(dòng)態(tài)范圍。所謂動(dòng)態(tài)范圍,是一種用數(shù)學(xué)方式來描述場景中亮度層次范圍的技術(shù)術(shù)語,也就是指一幅圖像中最亮處和最暗處之間的比值。人眼所能感受的亮度范圍大概為1/103—10?nit,瞬時(shí)對(duì)比度可達(dá)10000:1,但是傳統(tǒng)的照片卻很難達(dá)到這一比例。HDR技術(shù)能夠?qū)嬅嬲w亮度的動(dòng)態(tài)范圍大幅度擴(kuò)展,不只是白色,而是立體空間中的各種色彩,從而提升拍攝畫面的整體色彩空間。

在夜間攝影時(shí),黑得“五彩斑斕”將再也不是什么笑談。而常見的過度曝光或者逆光“黑臉”照片,也可以輕松被HDR解決。一句話解釋,HDR就是幫你自動(dòng)調(diào)整曝光,使每一張照片都光彩動(dòng)人。

|降噪技術(shù),畫質(zhì)好更要有細(xì)節(jié)

簡單的科普一下:降噪是干什么?就是降低噪點(diǎn)。啥是噪點(diǎn)?就是圖像里面的噪聲,最簡單的例子就是沒信號(hào)的電視中閃爍的雪花。

電視畫面中的雪花就是生活中常見的圖像噪點(diǎn)(圖源:網(wǎng)絡(luò)

圖像的噪點(diǎn),最主要的來源是由光的散粒噪聲引起的,常見的原因就是拍攝環(huán)境不行,可能是夜太黑,也可能是光太暗。

很多經(jīng)常提到的詞匯其實(shí)都跟噪點(diǎn)有關(guān)。比如畫質(zhì),畫質(zhì)的技術(shù)術(shù)語是“信噪比”,是電子設(shè)備信號(hào)與噪點(diǎn)的功率譜之比,信噪比越高,給人的直觀感受就是畫質(zhì)越好。降噪技術(shù)其實(shí)是通過對(duì)損害圖像質(zhì)感的斑點(diǎn)、邊緣進(jìn)行智能處理,從而壓制噪點(diǎn),讓我們直觀地感受到畫質(zhì)“提升”了。

在降噪的過程中,有一個(gè)大課題就是如何避免畫面細(xì)節(jié)被損壞。比如我們拍一只貓,需要體現(xiàn)出貓的根根胡須、蓬松毛發(fā),在細(xì)節(jié)處理上的難度非常大,稍不小心這些細(xì)節(jié)就伴隨著噪點(diǎn)一起被處理掉了。一般的降噪技術(shù),對(duì)于這種復(fù)雜邊緣的處理,很容易導(dǎo)致“涂抹感”和“油畫感”,雖然提升了畫質(zhì),但是卻損失了畫面細(xì)節(jié),不傳神。曠視的超畫質(zhì)“黑科技”中,降噪技術(shù)基于曠視磨煉多年的AI算法,能夠最大程度地保留細(xì)節(jié)同時(shí)提升信噪比。畫質(zhì)提升的同時(shí),細(xì)節(jié)也能夠清晰的表現(xiàn)出來。

降噪處理前后的貓咪

|圖像增強(qiáng),更智能地給圖片 “劃重點(diǎn)”

圖像增強(qiáng),增強(qiáng)的是圖像中的那些有用信息。圖像增強(qiáng)是有目的地強(qiáng)調(diào)圖像的整體或局部特征,將原來不清晰的圖像變得清晰、或者只把某些感興趣的特征變清晰,擴(kuò)大圖像中不同物體特征之間的差別,從而改善圖像質(zhì)量、豐富信息量、突出畫面重點(diǎn)。

圖像增強(qiáng)技術(shù)在我們的“美圖”生活中相當(dāng)常見,在拍照或者處理圖片時(shí)常用的“銳化”工具,提高圖像中某一部位的清晰度,讓某些區(qū)域的色彩更鮮亮,這就是圖像增強(qiáng)技術(shù)最好的體現(xiàn)。

圖像增強(qiáng)技術(shù)示意(左為原圖,右為增強(qiáng)后)

圖像增強(qiáng)技術(shù)的難點(diǎn),在于每個(gè)人對(duì)于畫面內(nèi)容的要求和重點(diǎn)的選擇是不一樣的,如何自動(dòng)分辨每一張圖片需要突出哪些局部,這對(duì)技術(shù)提出了更高的要求。曠視的圖像增強(qiáng)算法,能夠更加準(zhǔn)確地判斷圖像內(nèi)容中需要突出的部分,從而讓拍攝者能更輕松地拍出想要的感覺。

超畫質(zhì)技術(shù)背后的故事

從1.0到3.0,曠視算法工程師們的魔鬼訓(xùn)練

在超畫質(zhì)技術(shù)演進(jìn)的求索之路上,曠視從未停止過腳步。曠視的研發(fā)人員始終相信,AI技術(shù)與數(shù)字圖像的結(jié)合,將會(huì)產(chǎn)生神奇的化學(xué)反應(yīng),更好地解決現(xiàn)實(shí)中的痛點(diǎn),從而帶來實(shí)際價(jià)值。于是,如何不斷完美超畫質(zhì)技術(shù),成為了一道擺在一眾算法工程師面前的大課題。

|從0到1的頭腦風(fēng)暴

大約是在2018年,在一次內(nèi)部會(huì)議上,一位產(chǎn)品經(jīng)理在他的PPT中首次提出了這個(gè)概念。萌生這個(gè)想法其實(shí)并沒有什么曲折離奇的故事,就是因?yàn)楝F(xiàn)有的產(chǎn)品和技術(shù),無法滿足大家對(duì)照片的高要求,而且在那幾年,手機(jī)廠商間的硝煙主要集中在攝像頭的戰(zhàn)場,敏銳的曠視人發(fā)現(xiàn)了這個(gè)問題和AI領(lǐng)域的契合點(diǎn),于是就促成了計(jì)算機(jī)AI技術(shù)和傳統(tǒng)攝影技術(shù)的一次神奇聯(lián)姻。當(dāng)然,頭腦風(fēng)暴之后就是曠視內(nèi)部一次次地論證、分析與推演,終于,在2019年超畫質(zhì)技術(shù)1.0正式上線,攝影技術(shù)的新革命打響了第一槍。

超畫質(zhì)技術(shù)下夜晚的城市

|當(dāng)算法工程師化身為見習(xí)攝影師

曠視超畫質(zhì)團(tuán)隊(duì)的算法工程師在上崗之前,需要接受一場嚴(yán)格的“審美培訓(xùn)”,這是一項(xiàng)不可避免的挑戰(zhàn)。我們都知道,計(jì)算機(jī)的世界本源是0和1,是嚴(yán)格理性的科學(xué)推演,而對(duì)美的追求,卻是從藝術(shù)出發(fā),是人類先天感性思維的升華。曠視的超畫質(zhì)技術(shù)所追求的,是對(duì)藝術(shù)和科技的把控加以更為嚴(yán)格的標(biāo)準(zhǔn),這就要求算法工程師同時(shí)還要有相當(dāng)出色的藝術(shù)修養(yǎng)。為了更精準(zhǔn)地了解用戶需求,緊追時(shí)尚的潮流,曠視的算法工程師們經(jīng)常組團(tuán)鉆研相機(jī)的新功能,從實(shí)踐中理解什么才是更加優(yōu)質(zhì)的畫面體驗(yàn)。

辛苦鉆研的曠視算法工程師

|堅(jiān)持第一性原理,深挖美的本質(zhì)

曠視認(rèn)為,技術(shù)落地要堅(jiān)持第一性原理,從本質(zhì)出發(fā)。解決超畫質(zhì)技術(shù)也不外如是,要從手機(jī)拍照時(shí)畫面亮度偏暗/過曝、噪聲過大、動(dòng)態(tài)范圍不佳等畫質(zhì)問題進(jìn)行根本突破。

憑借在深度學(xué)習(xí)領(lǐng)域的積累和Brain++平臺(tái)強(qiáng)大的能力,曠視超畫質(zhì)技術(shù)團(tuán)隊(duì)在業(yè)內(nèi)首個(gè)推出AI+CV模式超畫質(zhì)算法,實(shí)現(xiàn)了畫面品質(zhì)的整體提升。在不到2年的時(shí)間里,曠視超畫質(zhì)技術(shù)已經(jīng)從1.0迭代到3.0版本。如今曠視的超畫質(zhì)技術(shù),不僅提供了百余種細(xì)節(jié)功能,實(shí)現(xiàn)了畫面細(xì)節(jié)增強(qiáng)、動(dòng)態(tài)范圍提升、降噪效果升級(jí)等全局優(yōu)化,還特別新增了閉眼融合修復(fù)、天空噪聲優(yōu)化、揮手鬼影優(yōu)化等全新功能。簡單來講,手機(jī)有了曠視超畫質(zhì)技術(shù),前置后置皆美麗,亮光暗光都清晰。

原畫質(zhì)到超畫質(zhì)3.0的轉(zhuǎn)變

從古至今,人類一直在嘗試找到一種可以100%還原本真、定格美麗的工具,并它必須易分享、好保存,從而能夠向更多人展示生活的每一刻心動(dòng)瞬間。如今,曠視的超畫質(zhì)技術(shù)應(yīng)用在50多款主流手機(jī)中,正在讓這個(gè)愿望距離實(shí)現(xiàn)更進(jìn)一步。看了這么多美麗的照片,你還不抓緊拿起手機(jī),記錄下身邊美麗的瞬間?

責(zé)任編輯:lq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 算法
    +關(guān)注

    關(guān)注

    23

    文章

    4552

    瀏覽量

    92019
  • 黑科技
    +關(guān)注

    關(guān)注

    14

    文章

    127

    瀏覽量

    37123
  • 曠視
    +關(guān)注

    關(guān)注

    0

    文章

    75

    瀏覽量

    6549

原文標(biāo)題:聊聊曠廠黑科技 | 超畫質(zhì),如何抓住最美的瞬間

文章出處:【微信號(hào):megvii,微信公眾號(hào):曠視MEGVII】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    用智能DAC揭開醫(yī)療報(bào)警設(shè)計(jì)的神秘面紗

    電子發(fā)燒友網(wǎng)站提供《用智能DAC揭開醫(yī)療報(bào)警設(shè)計(jì)的神秘面紗.pdf》資料免費(fèi)下載
    發(fā)表于 09-14 10:50 ?0次下載
    用智能DAC<b class='flag-5'>揭開</b>醫(yī)療報(bào)警設(shè)計(jì)的<b class='flag-5'>神秘</b><b class='flag-5'>面紗</b>

    北斗衛(wèi)星時(shí)鐘——揭開“授時(shí)”的神秘面紗

    ,這些時(shí)間信息又是從哪里來的呢?為什么我們可以隨時(shí)隨地都能獲取準(zhǔn)確的時(shí)間信息?這得益于高精度的 授時(shí)服務(wù) ,今天我們就來揭開“授時(shí)”的神秘面紗。 ? ? ?大家都知道我國的北斗導(dǎo)航衛(wèi)星,是用于定位導(dǎo)航的。那么北斗是怎么進(jìn)行定位導(dǎo)
    的頭像 發(fā)表于 07-25 16:21 ?224次閱讀
    北斗衛(wèi)星時(shí)鐘——<b class='flag-5'>揭開</b>“授時(shí)”的<b class='flag-5'>神秘</b><b class='flag-5'>面紗</b>

    xAI公司將在八月揭開其新Grok-2大語言模型的神秘面紗

    在科技界的浩瀚星空中,埃隆·馬斯克的每一次發(fā)聲都如同璀璨的新星,瞬間照亮前行的道路。近日,這位科技巨擘在推特上的一則簡短宣告,再次將全球的目光聚焦于人工智能的前沿陣地——他的初創(chuàng)公司xAI即將在八月揭開其最新力作Grok-2大語言模型的神秘
    的頭像 發(fā)表于 07-02 11:38 ?384次閱讀

    揭開Pluto XZU20的神秘面紗—探尋未來緊湊而強(qiáng)大的FPGA解決方案

    創(chuàng)新成果具有挽救生命、改變生活和創(chuàng)造夢想的能力?,F(xiàn)在讓我們一起緊隨Pluto產(chǎn)品發(fā)布會(huì)的步伐,揭開PlutoXZU20的神秘面紗,與我們一起探尋未來緊湊而強(qiáng)大的FP
    的頭像 發(fā)表于 06-21 08:09 ?219次閱讀
    <b class='flag-5'>揭開</b>Pluto XZU20的<b class='flag-5'>神秘</b><b class='flag-5'>面紗</b>—探尋未來緊湊而強(qiáng)大的FPGA解決方案

    揭開快充芯片的神秘面紗

    UFP芯片是一種用于USB快充技術(shù)的關(guān)鍵元件,它在移動(dòng)設(shè)備和充電器之間進(jìn)行通信和協(xié)調(diào),以實(shí)現(xiàn)高效、安全、快速的充電過程。下面我們將揭開快充芯片的神秘面紗,深入探討UFP快充芯片的工作原理和功能。
    的頭像 發(fā)表于 04-15 12:51 ?426次閱讀

    UFP芯片-揭開快充芯片的神秘面紗

    什么是UFP芯片呢? UFP芯片是快充協(xié)議芯片的一種類型,主要應(yīng)用場景為無線充電器、快充電動(dòng)工具、快充誘騙線等領(lǐng)域。它與充電端(DFP)協(xié)議芯片和雙角色端(DRP)芯片共同構(gòu)成了快充協(xié)議芯片的主要類型。 ? ? UFP芯片的主要功能是什么? UFP芯片,即受電端協(xié)議芯片,是快充技術(shù)中的關(guān)鍵組件。它的主要功能是在快充過程中,與充電端(通常是充電器或充電設(shè)備)進(jìn)行通信和協(xié)商,以確保安全、高效、快速地充電。 具體來說,UFP芯片在接收到充電請(qǐng)
    的頭像 發(fā)表于 04-13 20:00 ?443次閱讀
    UFP芯片-<b class='flag-5'>揭開</b>快充芯片的<b class='flag-5'>神秘</b><b class='flag-5'>面紗</b>

    英偉達(dá)GTC大會(huì)將開幕 人形機(jī)器人成英偉達(dá)GTC議題

    英偉達(dá)創(chuàng)始人兼CEO黃仁勛將在北京時(shí)間3月19日凌晨發(fā)表主題演講,預(yù)計(jì)他將為我們揭開新一代硬件產(chǎn)品的神秘面紗
    的頭像 發(fā)表于 03-18 15:14 ?1461次閱讀

    芯訊通打造了基于高通最新一代驍龍?X75和X72 5G調(diào)制解調(diào)器

    隨著ChatGPT、文心一言等AIGC大模型的崛起,AI的神秘面紗逐漸被公眾揭開。
    的頭像 發(fā)表于 03-14 10:00 ?922次閱讀

    Vision Board/首款A(yù)RM Cortex-M85開發(fā)板價(jià)格大公開

    第一輪24小時(shí)限時(shí)盲購,機(jī)器視覺Vision Board獲得了預(yù)期的支持,我們由衷感謝所有開發(fā)者的熱情參與。機(jī)器視覺Vision Board 即將開啟第二輪預(yù)售,而這一次我們將揭開價(jià)格的神秘
    的頭像 發(fā)表于 02-22 14:13 ?1004次閱讀
    Vision Board/首款A(yù)RM Cortex-M85開發(fā)板價(jià)格大公開

    AQY212S光耦合器:特性和應(yīng)用揭秘

    讓我們深入研究AQY212S的功能和應(yīng)用,揭開這款令人印象深刻的器件的神秘面紗。
    的頭像 發(fā)表于 01-19 16:01 ?866次閱讀
    AQY212S光耦合器:特性和應(yīng)用揭秘

    無源濾波設(shè)計(jì)分享,揭開測溫濾波電路的神秘面紗

    在使用熱電偶測溫模塊或設(shè)計(jì)熱電偶測溫電路中,每個(gè)采集通道往往需要一階甚至多階的無源濾波電路,關(guān)于熱電偶測溫?zé)o源濾波電路的設(shè)計(jì)需要考慮什么因素呢?熱電偶測溫原理簡述兩種不同材料的導(dǎo)體A、B與采樣電路串接成一個(gè)閉合回路,當(dāng)熱端1和冷端2處于不同的溫度T、T0時(shí),回路中就會(huì)產(chǎn)生熱電動(dòng)勢EAB(T,T0)被ADC采集到。當(dāng)熱端和冷端的溫度差發(fā)生變化時(shí)熱電動(dòng)勢EAB(
    的頭像 發(fā)表于 12-11 17:42 ?386次閱讀
    無源濾波設(shè)計(jì)分享,<b class='flag-5'>揭開</b>測溫濾波電路的<b class='flag-5'>神秘</b><b class='flag-5'>面紗</b>

    AN-501推導(dǎo)時(shí)鐘抖動(dòng)引起ADC信噪比上限,為何信號(hào)沒有取有效值?

    時(shí)鐘抖動(dòng)引起的采樣噪聲為: 計(jì)算SNR為: 為何這里不像《[MT-001_cn] 揭開公式(SNR = 6.02N + 1.76dB)的神秘面紗,以及為什么我們要予以關(guān)注》文章里那樣,信號(hào)用
    發(fā)表于 12-01 08:30

    揭開高性能多路復(fù)用數(shù)據(jù)采集系統(tǒng)面紗

    電子發(fā)燒友網(wǎng)站提供《揭開高性能多路復(fù)用數(shù)據(jù)采集系統(tǒng)面紗.pdf》資料免費(fèi)下載
    發(fā)表于 11-23 10:06 ?0次下載
    <b class='flag-5'>揭開</b>高性能多路復(fù)用數(shù)據(jù)采集系統(tǒng)<b class='flag-5'>面紗</b>

    揭開Apex Microtechnology工業(yè)噴墨打印解決方案的神秘面紗

    噴嘴的行為類似于電容器,并且正在發(fā)射的打印頭中的噴嘴數(shù)量連續(xù)變化。因此,驅(qū)動(dòng)打印頭的放大器看到非常動(dòng)態(tài)的電容性負(fù)載,這對(duì)于離散設(shè)計(jì)的放大器級(jí)來說可能是困難的。
    的頭像 發(fā)表于 11-13 16:09 ?495次閱讀

    深度學(xué)習(xí)算法和傳統(tǒng)機(jī)器視覺助力工業(yè)外觀檢測

    在很多人眼里,深度學(xué)習(xí)是一個(gè)非常神奇的技術(shù),是人工智能的未來,是機(jī)器學(xué)習(xí)的圣杯。今天深視創(chuàng)新帶您一起揭開神秘面紗,了解什么才是深度學(xué)習(xí)。
    的頭像 發(fā)表于 11-09 10:58 ?562次閱讀
    深度學(xué)習(xí)算法和傳統(tǒng)機(jī)器視覺助力工業(yè)外觀檢測