小孔成像模型

通過(guò)相機(jī)拍攝圖像可以將3D世界投影到2D圖像當(dāng)中,因此,我們可以把相機(jī)模型看作是一個(gè)3D空間到2D空間的映射。下面我們介紹最簡(jiǎn)單的相機(jī)模型——小孔成像模型卢厂,也是針對(duì)普通數(shù)字相機(jī)最為廣泛應(yīng)用的一種相機(jī)模型。

圖1. 小孔成像模型惠啄。3D點(diǎn)X在圖像上的像為連接相機(jī)投影中心O和3D點(diǎn)的直線(xiàn)和成像平面Z=f的交點(diǎn)x慎恒。

假設(shè)相機(jī)的投影中心位于一個(gè)歐式坐標(biāo)系的原點(diǎn)\mathbf{O},相機(jī)面向z軸正方向撵渡,并且成像平面(或者說(shuō)焦平面)在當(dāng)前坐標(biāo)系下的表達(dá)為Z=f融柬。那么,在小孔成像模型的作用下下趋距,如圖1所示粒氧,3D空間中的一個(gè)點(diǎn)\mathbf{X} = (X,Y,Z)^T會(huì)被投影為成像平面上的一個(gè)2D點(diǎn),也即連接相機(jī)投影中心和3D點(diǎn)的直線(xiàn)與成像平面的交點(diǎn)节腐。通過(guò)相似三角形外盯,我們可以很容易的看出3D點(diǎn)(X,Y,Z)^T被投影成為成像平面上的(fX/Z,fY/Z,f)^T。暫時(shí)先不考慮最終的圖像坐標(biāo)翼雀,我們可以看出
\begin{pmatrix} X \\ Y \\ Z \end{pmatrix} \mapsto \begin{pmatrix} fX/Z \\ fY/Z \end{pmatrix} \label{pmapping} 將3D點(diǎn)從三維的歐式空間投影到了2D圖像平面饱苟,也即二維的歐式空間中。

假如使用嚴(yán)格的齊次坐標(biāo)進(jìn)行表述狼渊,那么上述投影過(guò)程可以表示為以下矩陣相乘的形式箱熬,也即公式[1]:
\begin{aligned} \begin{pmatrix} X \\ Y \\ Z \\ 1 \end{pmatrix} \mapsto \begin{pmatrix} fX/Z \\ fY/Z \\ 1 \end{pmatrix} & = \begin{bmatrix} f & 0 & 0 & 0\\ 0 & f & 0 & 0 \\ 0 & 0 & 1 & 0 \end{bmatrix} \begin{pmatrix} X \\ Y \\ Z \\ 1 \end{pmatrix} \\ & = \begin{bmatrix} f & 0 & 0\\ 0 & f & 0\\ 0 & 0 & 1 \end{bmatrix} \begin{bmatrix} 1 & 0 & 0 & 0\\ 0 & 1 & 0 & 0 \\ 0 & 0 & 1 & 0 \end{bmatrix} \begin{pmatrix} X \\ Y \\ Z \\ 1 \end{pmatrix} \\ & = diag(f,f,1) [\mathbf{I}|\mathbf{0}]\mathbf{X} 。 \end{aligned}
其中\mathbf{P} = [\mathbf{I}|\mathbf{0}]通常被稱(chēng)為相機(jī)的投影矩陣。三維點(diǎn)的齊次坐標(biāo)為(X,Y,Z,1)^T城须,二維點(diǎn)的齊次坐標(biāo)為(fX/Z,fY/Z,1)^T护锤,也等價(jià)于(fX,fY,Z)^T

圖2. 成像平面坐標(biāo)系酿傍。

在上述公式 [1]中假設(shè)成像平面的原點(diǎn)為相機(jī)的主點(diǎn)位置。然而驱入,實(shí)際相機(jī)圖片的原點(diǎn)往往是圖像左上角的點(diǎn)赤炒。因此,我們定義主點(diǎn)在圖像上的坐標(biāo)為(p_x,p_y)^T亏较,如圖2所示莺褒,從而得到
\begin{pmatrix} X \\ Y \\ Z \end{pmatrix} \mapsto \begin{pmatrix} fX/Z+p_x \\ fY/Z+p_y \end{pmatrix} = \begin{pmatrix} u \\ v \end{pmatrix}。

將其表示為齊次坐標(biāo)的形式雪情,我們可以得到公式[2]
\begin{aligned} \begin{pmatrix} X \\ Y \\ Z \\ 1 \end{pmatrix} \mapsto \begin{pmatrix} fX+Zp_x \\ fY+Zp_y \\ Z \end{pmatrix} & = \begin{bmatrix} f & 0 & p_x & 0\\ 0 & f & p_y & 0 \\ 0 & 0 & 1 & 0 \end{bmatrix} \begin{pmatrix} X \\ Y \\ Z \\ 1 \end{pmatrix} \\ & = \begin{bmatrix} f & 0 & p_x\\ 0 & f & p_y\\ 0 & 0 & 1 \end{bmatrix} \begin{bmatrix} 1 & 0 & 0 & 0\\ 0 & 1 & 0 & 0 \\ 0 & 0 & 1 & 0 \end{bmatrix} \begin{pmatrix} X \\ Y \\ Z \\ 1 \end{pmatrix} = \begin{pmatrix} u \\ v \\ 1 \end{pmatrix} 遵岩。 \end{aligned}

定義內(nèi)參矩陣
\mathbf{K} = \begin{bmatrix} f & 0 & p_x\\ 0 & f & p_y\\ 0 & 0 & 1 \end{bmatrix} ,
最終公式[2]可以表達(dá)為
\mathbf{x} = \mathbf{K}\mathbf{P}\mathbf{X} = \mathbf{K} [\mathbf{I}|\mathbf{0}]\mathbf{X}巡通。

注意公式[2]其實(shí)共包含了兩個(gè)階段的坐標(biāo)變換:

  • 第一個(gè)階段是標(biāo)準(zhǔn)的透視投影過(guò)程尘执,也即\mathbf{P}部分。它將3D點(diǎn)(X,Y,Z,1)^T投影成了歸一化平面(假設(shè)焦距f=1宴凉,則為Z=1平面)上的一個(gè)2D點(diǎn)(X,Y,Z)^T誊锭,也即(X/Z,Y/Z,1)^T
  • 第二個(gè)階段是基于相機(jī)內(nèi)參的變換弥锄,即\mathbf{K}部分丧靡。它將歸一化平面坐標(biāo)系中的點(diǎn)轉(zhuǎn)化到了以像素為單位的圖像坐標(biāo)系中。

當(dāng)我們擁有2D點(diǎn)的像素坐標(biāo)\mathbf{x}以及相機(jī)的內(nèi)參矩陣\mathbf{K}時(shí)籽暇,可以通過(guò)公式
\hat{\mathbf{x}} = \mathbf{K}^{-1}\mathbf{P}\mathbf{X} 得到這個(gè)點(diǎn)在歸一化平面上的坐標(biāo)温治。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市戒悠,隨后出現(xiàn)的幾起案子熬荆,更是在濱河造成了極大的恐慌,老刑警劉巖救崔,帶你破解...
    沈念sama閱讀 219,188評(píng)論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件惶看,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡六孵,警方通過(guò)查閱死者的電腦和手機(jī)纬黎,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,464評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門(mén),熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)劫窒,“玉大人本今,你說(shuō)我怎么就攤上這事。” “怎么了冠息?”我有些...
    開(kāi)封第一講書(shū)人閱讀 165,562評(píng)論 0 356
  • 文/不壞的土叔 我叫張陵挪凑,是天一觀(guān)的道長(zhǎng)。 經(jīng)常有香客問(wèn)我逛艰,道長(zhǎng)躏碳,這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,893評(píng)論 1 295
  • 正文 為了忘掉前任散怖,我火速辦了婚禮菇绵,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘镇眷。我一直安慰自己咬最,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,917評(píng)論 6 392
  • 文/花漫 我一把揭開(kāi)白布欠动。 她就那樣靜靜地躺著永乌,像睡著了一般。 火紅的嫁衣襯著肌膚如雪具伍。 梳的紋絲不亂的頭發(fā)上翅雏,一...
    開(kāi)封第一講書(shū)人閱讀 51,708評(píng)論 1 305
  • 那天,我揣著相機(jī)與錄音人芽,去河邊找鬼枚荣。 笑死,一個(gè)胖子當(dāng)著我的面吹牛啼肩,可吹牛的內(nèi)容都是我干的橄妆。 我是一名探鬼主播,決...
    沈念sama閱讀 40,430評(píng)論 3 420
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼祈坠,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼害碾!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起赦拘,我...
    開(kāi)封第一講書(shū)人閱讀 39,342評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤慌随,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后躺同,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體阁猜,經(jīng)...
    沈念sama閱讀 45,801評(píng)論 1 317
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,976評(píng)論 3 337
  • 正文 我和宋清朗相戀三年蹋艺,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了剃袍。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 40,115評(píng)論 1 351
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡捎谨,死狀恐怖民效,靈堂內(nèi)的尸體忽然破棺而出憔维,到底是詐尸還是另有隱情,我是刑警寧澤畏邢,帶...
    沈念sama閱讀 35,804評(píng)論 5 346
  • 正文 年R本政府宣布业扒,位于F島的核電站,受9級(jí)特大地震影響舒萎,放射性物質(zhì)發(fā)生泄漏程储。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,458評(píng)論 3 331
  • 文/蒙蒙 一臂寝、第九天 我趴在偏房一處隱蔽的房頂上張望虱肄。 院中可真熱鬧,春花似錦交煞、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 32,008評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至萝挤,卻和暖如春御毅,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背怜珍。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,135評(píng)論 1 272
  • 我被黑心中介騙來(lái)泰國(guó)打工端蛆, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人酥泛。 一個(gè)月前我還...
    沈念sama閱讀 48,365評(píng)論 3 373
  • 正文 我出身青樓今豆,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親柔袁。 傳聞我的和親對(duì)象是個(gè)殘疾皇子呆躲,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,055評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容