6.Spatial-Depth Super Resolution for Range Images

框架

[1]對low-resolution進行上采樣,得到大小與原圖一樣大小的high-resolution 記作:D(0).
[2]迭代模塊:基于當(dāng)前深度圖D(i)建立costVolume: Ci.
[3]在costVolume的每個切片中執(zhí)行雙邊濾波以產(chǎn)生新的costVolume
[4]D(i+1):基于該costVolume首先選擇具有最小成本的深度假設(shè)和之后的子像素估計.


1.Construction and re?nement of the cost volume

選擇平方差作為成本函數(shù),因為我們稍后將使用二次多項式插值用于子像素估計浑塞。 該成本函數(shù)可以幫助保持輸入深度圖的子像素精度巷折。

可以通過顏色信息膏燕,獲得立體空間超分辨率的銳利/真實深度邊緣,接下來采用BF:

y, x are the indices of the current pixel in the camera image,
and u, v are two variables.γc and γs are two constants used as the thresholds of the color difference and the ?lter size.


2.Sub-pixel Estimation

為了減少由深度假設(shè)選擇過程中的量化引起的不連續(xù)性咽袜,基于二次多項式插值提出了子像素估計算法讹开。

d is the discrete depth with the minimal cost
d_ = d ? 1, and d+ = d + 1.
Xmin的估計值為上式

matlab code:

function Result = LayeredBilateralFilter(color,depth,sigma_w,sigma_c,w,DepthInteval,IterativeTime)
%% Initialization
L=10000;
k=1;
D(:,:,1) = double(depth);
CandidateD = 0:DepthInteval:255;
height = size(color,1);
width = size(color,2);
color = double(color);
CostVolume=zeros(height,width,length(CandidateD));
CostCW=zeros(height,width,length(CandidateD));

%% Iterative Module
while 1
    for i=1:length(CandidateD)
        CostVolume(:,:,i) = min(L,(CandidateD(i)-D(:,:,k)).^2);                   %Cost Volume C(i)
        CostCW(:,:,i) = BilateralFilter(color,CostVolume(:,:,i),sigma_w,sigma_c,w);   %A bilateral filtering is performed throughout each slice of the cost volume to produce the new cost volume 
        % Compare with the reference, the color space is different  
    end
    [BestCost,BestDepthLocation] = min(CostCW,[],3);                          %Selecting the depth hypothesis with the minimal cost

    % Sub-pixel estimation
    CostUpper = zeros(height,width);
    CostLower = zeros(height,width);
    for i = 1:length(CandidateD) 
        CostUpper = CostUpper + CostCW(:,:,i).*((BestDepthLocation+1)==i);
        CostLower = CostLower + CostCW(:,:,i).*((BestDepthLocation-1)==i);
    end
    k = k + 1;
    D(:,:,k) = CandidateD(BestDepthLocation) - DepthInteval * (CostUpper-CostLower) ./ (2*(CostUpper+CostLower-2*BestCost));  
    % end of sub-pixel estimation   

    if IterativeTime==k
        break;
    end
end
Result = D(:,:,IterativeTime);
end

.

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末盅视,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子旦万,更是在濱河造成了極大的恐慌左冬,老刑警劉巖,帶你破解...
    沈念sama閱讀 211,496評論 6 491
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件纸型,死亡現(xiàn)場離奇詭異,居然都是意外死亡梅忌,警方通過查閱死者的電腦和手機狰腌,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,187評論 3 385
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來牧氮,“玉大人琼腔,你說我怎么就攤上這事□飧穑” “怎么了丹莲?”我有些...
    開封第一講書人閱讀 157,091評論 0 348
  • 文/不壞的土叔 我叫張陵,是天一觀的道長尸诽。 經(jīng)常有香客問我甥材,道長,這世上最難降的妖魔是什么性含? 我笑而不...
    開封第一講書人閱讀 56,458評論 1 283
  • 正文 為了忘掉前任洲赵,我火速辦了婚禮,結(jié)果婚禮上商蕴,老公的妹妹穿的比我還像新娘叠萍。我一直安慰自己,他們只是感情好绪商,可當(dāng)我...
    茶點故事閱讀 65,542評論 6 385
  • 文/花漫 我一把揭開白布苛谷。 她就那樣靜靜地躺著,像睡著了一般格郁。 火紅的嫁衣襯著肌膚如雪腹殿。 梳的紋絲不亂的頭發(fā)上独悴,一...
    開封第一講書人閱讀 49,802評論 1 290
  • 那天,我揣著相機與錄音赫蛇,去河邊找鬼绵患。 笑死,一個胖子當(dāng)著我的面吹牛悟耘,可吹牛的內(nèi)容都是我干的落蝙。 我是一名探鬼主播,決...
    沈念sama閱讀 38,945評論 3 407
  • 文/蒼蘭香墨 我猛地睜開眼暂幼,長吁一口氣:“原來是場噩夢啊……” “哼筏勒!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起旺嬉,我...
    開封第一講書人閱讀 37,709評論 0 266
  • 序言:老撾萬榮一對情侶失蹤管行,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后邪媳,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體捐顷,經(jīng)...
    沈念sama閱讀 44,158評論 1 303
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,502評論 2 327
  • 正文 我和宋清朗相戀三年雨效,在試婚紗的時候發(fā)現(xiàn)自己被綠了迅涮。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 38,637評論 1 340
  • 序言:一個原本活蹦亂跳的男人離奇死亡徽龟,死狀恐怖叮姑,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情据悔,我是刑警寧澤传透,帶...
    沈念sama閱讀 34,300評論 4 329
  • 正文 年R本政府宣布,位于F島的核電站极颓,受9級特大地震影響朱盐,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜菠隆,卻給世界環(huán)境...
    茶點故事閱讀 39,911評論 3 313
  • 文/蒙蒙 一托享、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧浸赫,春花似錦闰围、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,744評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至运敢,卻和暖如春校仑,著一層夾襖步出監(jiān)牢的瞬間忠售,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,982評論 1 266
  • 我被黑心中介騙來泰國打工迄沫, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留稻扬,地道東北人。 一個月前我還...
    沈念sama閱讀 46,344評論 2 360
  • 正文 我出身青樓羊瘩,卻偏偏與公主長得像泰佳,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子尘吗,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 43,500評論 2 348

推薦閱讀更多精彩內(nèi)容

  • 2017-10-3 星期二 多云 今天我們的行程好緊張似得睬捶,爸爸早晨催促我們趕緊吃飯趕緊出門黔宛,把我緊張的。 首先我...
    南番娘娘閱讀 217評論 1 0
  • 接龍客棧602末日火種12‖清風(fēng)自來 走進末日擒贸,體驗冷暖:末日火種目錄 醒醒和小七臀晃,終于回到了基地,基地外寂靜一片...
    三日初醒閱讀 445評論 13 7
  • 婚禮進行時 喻黃be 電腦前介劫,黃少天安靜的坐著徽惋,臉上依稀可見沒有被風(fēng)干的淚痕。電腦頁面上蜕猫,是一封婚禮邀請函。喻文州...
    時光加冕閱讀 1,239評論 1 8
  • 前言 最近工作上遇到了使用git+repo的情況哎迄,需要用公司的郵箱和域賬號名重新申請git賬號回右,而我本身在gith...
    蘋果API搬運工閱讀 720評論 0 0
  • 今天2016年2月15日,天氣陰天漱挚,輕度霧霾翔烁。 站里了一天中的我,終于下班了旨涝,心中開心又喜悅蹬屹,因為我明天也休假,但...
    窮奇閱讀 195評論 0 0