在RAW域去噪聲的原因
Raw 圖像會(huì)經(jīng)過(guò)isp各個(gè)block亿卤，每一步的信號(hào)處理操作都會(huì)造成噪聲不同的變化。
1. Lens shading correction 對(duì)噪聲的影響
因?yàn)閘ens shading correction 是在圖像的上乘以一個(gè)gain铁蹈，遠(yuǎn)離中心的地方gain 越大，因此會(huì)導(dǎo)致众眨，gain大的位置握牧，噪聲也變得更大。
原始信號(hào)是這樣的：
經(jīng)過(guò)shading correction围辙，如下圖我碟，圖像邊緣的噪聲會(huì)被顯著增強(qiáng)
由圖像中心到邊緣就會(huì)形成沿徑向增強(qiáng)的噪聲圖像，也被稱作radial noise姚建。
2. demosaic對(duì)噪聲的影響
由于demosaic 對(duì)原始信號(hào)進(jìn)行了插值操作，會(huì)導(dǎo)致圖像的噪聲變?yōu)榻Y(jié)構(gòu)性噪聲吱殉。
如圖d所示掸冤，圖像會(huì)出現(xiàn)一些特別的pattern noise
3. 非線性變換
Gamma :
Gamma可以近似理解為不同的亮度值乘以的gain不一樣，亮度越小的地方乘以的gain越大友雳，亮度越大的地方乘以的gain越小稿湿，因此gamma之后的噪聲又發(fā)成了一個(gè)非線性變化，模型為：
4.線性變換
比如awb押赊，digital gain 這些運(yùn)算時(shí)線性變換饺藤，圖像的噪聲會(huì)線性變化。
5. CCM
無(wú)論是色彩管理還是RGB到SRGB色域空間的轉(zhuǎn)換，一般情況下是一個(gè)3*3的矩陣涕俗，這一步又增強(qiáng)了噪聲的相關(guān)性罗丰，而且還會(huì)增強(qiáng)視覺(jué)的彩色噪聲的飽和度，使噪聲的視覺(jué)效果變得更糟糕再姑。
結(jié)論：
圖像從sensor 輸出萌抵， 經(jīng)過(guò)isp后，圖像的噪聲性質(zhì)變得更加復(fù)雜元镀，難以處理绍填，所以在isp的前端進(jìn)行去噪處理是比較合適的選擇。（去彩色噪聲一般在isp的后端栖疑，因?yàn)檫@時(shí)候圖像可以很容易分離出亮度通道和彩色通道讨永。）
相關(guān)啟發(fā)：
1，raw domain的噪聲不是單純的高斯噪聲遇革，而是和亮度有關(guān)系的住闯。
2，在raw domain進(jìn)行一定程度的降噪澳淑，對(duì)于圖像質(zhì)量會(huì)有很大的提高比原，比如上圖中的結(jié)構(gòu)性噪聲。
3杠巡，在raw domain設(shè)計(jì)降噪算法會(huì)稍微容易一些量窘。在不同的亮度進(jìn)行不同強(qiáng)度的降噪，或者把噪聲歸一化氢拥，有利于保護(hù)細(xì)節(jié)蚌铜。
4，noise profile并不是單純用在denoise這一個(gè)模塊上嫩海，還以用在時(shí)域降噪冬殃，demosaic等模塊上。
5叁怪，實(shí)際使用時(shí)并不一定要在raw domain降噪审葬，很多ISP也都是以YUV domain降噪為主體的。
RAW域噪聲特性：
高斯噪聲與信號(hào)無(wú)關(guān)奕谭，泊松噪聲與信號(hào)有關(guān)涣觉。
有了這個(gè)數(shù)學(xué)描述，可以建立起信號(hào)強(qiáng)度與噪聲強(qiáng)度之間的對(duì)應(yīng)關(guān)系血柳，在系統(tǒng)運(yùn)行期可以以此為輸入調(diào)節(jié)去噪算法更好地去噪官册。
降噪的評(píng)價(jià)標(biāo)準(zhǔn)：
PSNR : 峰值信噪比 Peak Signal to Noise Ratio
SNR ： 信噪比 SIGNAL-NOISE RATIO
snr的標(biāo)準(zhǔn)是：dB越高，降噪程度越好难捌。
一般會(huì)出現(xiàn)兩種問(wèn)題：
1膝宁，SNR好并不能代表真實(shí)的視覺(jué)噪聲鸦难，有些同樣的snr，但是視覺(jué)表現(xiàn)出來(lái)就不同：visual noise
2员淫，snr好并不能代表最終圖像質(zhì)量好合蔽，有時(shí)會(huì)過(guò)度涂抹；snr雖高满粗，但是圖像質(zhì)量并不好辈末。
同樣的方差，完全不同的視覺(jué)效果映皆。
結(jié)論：因?yàn)椴煌念l率噪聲對(duì)人眼的視覺(jué)影響完全不一樣挤聘，并且人眼對(duì)彩噪和亮度噪聲的感覺(jué)也完全不一樣。
枯葉圖：
關(guān)于枯葉圖：
https://www.xianjichina.com/special/detail_342261.html
在手機(jī)行業(yè)中捅彻，降噪已經(jīng)成為信號(hào)處理中一個(gè)很重要的部分组去。由于使用的算法不同及要消除的噪聲量也不同，降噪處理會(huì)導(dǎo)致在低對(duì)比度細(xì)節(jié)方面有損失步淹，也就是紋理?yè)p失从隆。在過(guò)去的許多年里，降噪的效果也成為客觀圖像質(zhì)量評(píng)估的一個(gè)重要部分缭裆。不同的廠家使用的方法可能都不一樣键闺，我們所呈現(xiàn)的是根據(jù)我們的經(jīng)驗(yàn)得到的結(jié)果。我們發(fā)現(xiàn)一個(gè)問(wèn)題澈驼，如果使用中性的圖卡辛燥，待測(cè)的設(shè)備測(cè)試的結(jié)果是和真正的生活經(jīng)歷是不匹配的。我們采用的是有顏色的圖卡缝其。
評(píng)估新的圖卡和測(cè)試方法：
使用相機(jī)去拍攝挎塌，為了得到一個(gè)關(guān)于圖像質(zhì)量整體的印象，測(cè)試必須包含所謂的紋理?yè)p失測(cè)試和分辨率測(cè)試内边。一些專家也已經(jīng)討論了不同的方法榴都，有一個(gè)建議是使用“枯葉圖”，因?yàn)樗愃朴跇?shù)的枯葉漠其。為了評(píng)估新的圖卡和新的方法嘴高，使用不同的相機(jī)進(jìn)行測(cè)試。這就包含了在紋理?yè)p失有很低性能的相機(jī)和一些單反相機(jī)辉懒。
因此我們知道必須要更換圖卡和分析圖片的算法阳惹。自然物體和枯葉圖之間的主要區(qū)別就是枯葉圖是灰色的。幾乎在市場(chǎng)上所有以攝影為目的的相機(jī)都是以拜耳模式分布工作的并且需要在每個(gè)像素中插入丟失的顏色信息眶俩。去馬賽克當(dāng)然會(huì)對(duì)相機(jī)的SFR有影響。降噪算法可以在處理強(qiáng)度和顏色上有區(qū)別快鱼，因此一個(gè)純灰的圖卡是不能反映相機(jī)在彩色物體上的性能颠印。
