OpenGL簡介
OpenGL
(Open Graphics Library)是?個(gè)跨編程語?岔霸、跨平臺的編程圖形程序接?缤至,它將計(jì)
算機(jī)的資源抽象稱為?個(gè)個(gè)OpenGL
的對象撕贞,對這些資源的操作抽象為?個(gè)個(gè)的OpenGL
指令.OpenGL ES
(OpenGL for Embedded Systems)是OpenGL
三維圖形API
的?集决采,針對?機(jī)域滥、
PDA
和游戲主機(jī)等嵌?式設(shè)備?設(shè)計(jì)靡挥,去除了許多不必要和性能較低的API
接?.DirectX
是由很多API
組成的序矩,DirectX
并不是?個(gè)單純的圖形API
. 最重要的是DirectX
是屬于
Windows
上?個(gè)多媒體處理API
.并不?持Windows
以外的平臺,所以不是跨平臺框架. 按照性
質(zhì)分類,可以分為四?部分跋破,顯示部分
簸淀、聲?部分、輸?部分
和?絡(luò)部分.Metal
: Metal: Apple為游戲開發(fā)者推出了新的平臺技術(shù)
Metal毒返,該技術(shù)能夠?yàn)?/code>3D
圖 像提?
10倍的渲染性能.
Metal是
Apple為了解決
3D`渲染?推出的框架.
OpenGL
/OpenGL ES/ Metal 在任何項(xiàng)?中解決問題的本質(zhì)
就是利?GPU芯?來?效渲染圖形圖像
.圖形API
是iOS
開發(fā)者唯?接近GPU的?式
OpenGL 作用
- 游戲開發(fā)中租幕,對于游戲場景/人物的渲染
- 音視頻開發(fā)者中,視頻解碼后的數(shù)據(jù)渲染
- 地圖開發(fā)中拧簸,地圖數(shù)據(jù)的渲染
- 動畫開發(fā)中劲绪,實(shí)現(xiàn)動畫的繪制
- 視頻處理中,視頻加上濾鏡效果
OpenGL 專業(yè)名詞
OpenGL
上下?(context
)
在應(yīng)?程序調(diào)?任何
OpenGL
的指令之前盆赤,需要安排?先創(chuàng)建?個(gè)OpenGL
的上下?贾富。這個(gè)上下?是?個(gè)?常龐?的狀態(tài)機(jī),保存了OpenGL
中的各種狀態(tài)牺六,這也是OpenGL
指令執(zhí)?的基礎(chǔ)
OpenGL
的函數(shù)不管在哪個(gè)語?中颤枪,都是類似C語?
?樣的?向過程的函數(shù),本質(zhì)上都是對OpenGL
上下?這個(gè)龐?的狀態(tài)機(jī)中的某個(gè)狀態(tài)或者對象進(jìn)?操作淑际,當(dāng)然你得?先把這個(gè)對象設(shè)置為當(dāng)前對象畏纲。因此扇住,通過對OpenGL指令的封裝
,是可以將OpenGL
的相關(guān)調(diào)?封裝成為?個(gè)?向?qū)ο蟮膱D形API的
由于
OpenGL
上下?是?個(gè)巨?的狀態(tài)機(jī)霍骄,切換上下?往往會產(chǎn)?較?的開銷
台囱,但是不同的繪制模塊,可能需要使?完全獨(dú)?的狀態(tài)管理读整。因此簿训,可
以在應(yīng)?程序中分別創(chuàng)建多個(gè)不同的上下?
,在不同線程中使?不同的上下?米间,上下?之間共享紋理
强品、緩沖區(qū)等資源。這樣的?案屈糊,會?反復(fù)切換 上下?的榛,或者?量修改渲染狀態(tài)
,更加合理?效的.
OpenGL
狀態(tài)機(jī)
狀態(tài)機(jī)是理論上的?種機(jī)器
.這個(gè)?常難以理解.所以我們把這個(gè)狀態(tài)機(jī)這么理解.狀態(tài)機(jī)
描述了?個(gè)對象在其?命周期內(nèi)所經(jīng)歷的各種狀態(tài)
逻锐,狀態(tài)間的轉(zhuǎn)變
夫晌,發(fā)?轉(zhuǎn)變的動因,條件及轉(zhuǎn)變中所執(zhí)?的活動昧诱∠恚或者說,狀態(tài)機(jī)是?種?為盏档,說明對象在其?命周期中響應(yīng)事件所經(jīng)歷的狀態(tài)序列以及對那些狀態(tài)事件的響應(yīng)
凶掰。因此具有以下特點(diǎn):
1. 有`記憶功能`,能記住其當(dāng)前的狀態(tài)
2. 可以`接收輸?`蜈亩,根據(jù)輸?的內(nèi)容和??的原先狀態(tài)懦窘,修改??當(dāng)前狀態(tài),并且可以有對應(yīng)輸出
3. 當(dāng)進(jìn)?`特殊狀態(tài)(停機(jī)狀態(tài))`的時(shí)候稚配,變不再接收輸?畅涂,停??作;
-
類推到
OpenGL 中
來,可以這么理解:-
OpenGL
可以記錄??的狀態(tài)(如當(dāng)前所使?的顏?道川、是否開啟了混合功能等) -
OpenGL
可以接收輸?(當(dāng)調(diào)?OpenGL函數(shù)的時(shí)候毅戈,實(shí)際上可以看成OpenGL
在接收我們的輸?),如我們調(diào)?glColor3f
愤惰,則OpenGL
接收到這個(gè)輸?后會修改??的“當(dāng)前顏?”這個(gè)狀態(tài). -
OpenGL
可以進(jìn)?停?狀態(tài),不再接收輸?赘理。在程序退出前宦言,OpenGL總會先停??作的
-
渲染(Rendering)
- 將
圖形/圖像
數(shù)據(jù)轉(zhuǎn)換成3D空間圖像
操作叫做渲染(Rendering)
頂點(diǎn)數(shù)組(VertexArray
)和頂點(diǎn)緩沖區(qū)(VertexBuffer
)
- 畫圖?般是先
畫好圖像的?架
,然后再往?架??填充顏?
商模,這對于
OpenGL
也是?樣的奠旺。頂點(diǎn)數(shù)據(jù)就是要畫的圖像的?架蜘澜,和現(xiàn)實(shí)中不同的
是,OpenGL
中的圖像都是由圖元
組成响疚。在OpenGLES
中鄙信,有3種類型的圖
元:點(diǎn)
、線
忿晕、三?形
装诡。 - 那這些頂點(diǎn)數(shù)據(jù)最終是存儲在哪?的呢?
開發(fā)者可以選擇設(shè)定
函數(shù)指針
践盼,在調(diào)?繪制?法的時(shí)候鸦采,直接由內(nèi)存?zhèn)?頂點(diǎn)數(shù) 據(jù)
嚷缭,也就是說這部分?jǐn)?shù)據(jù)之前是存儲在內(nèi)存
當(dāng)中的拜鹤,被稱為頂點(diǎn)數(shù)組
。?
性能更?的做法是尿褪,提前分配?塊顯存肄程,將頂點(diǎn)數(shù)據(jù)預(yù)先傳?到顯存當(dāng)
中锣吼。這部分的顯存,就被稱為頂點(diǎn)緩沖區(qū)
- 頂點(diǎn)指的是我們在繪制?個(gè)圖形時(shí),它的
頂點(diǎn)位置數(shù)據(jù)
.?這個(gè)數(shù)據(jù)可以直接存儲在數(shù)組中
或者將其緩存到GPU內(nèi)存中
- 劃重點(diǎn):
- 3種類型的圖元:點(diǎn),線,三角形
- 頂點(diǎn)數(shù)組(VertexArray)在內(nèi)存中
- 頂點(diǎn)緩沖區(qū)(VertexBuffer)在緩沖中
管線
在
OpenGL
下渲染圖形,就會有經(jīng)歷?個(gè)?個(gè)節(jié)點(diǎn).?這樣的操作可以理解管線.?家可以想象成流?線.每個(gè)任務(wù)類似流?線般執(zhí)?.任務(wù)之間有先后順序.管線是?個(gè)抽象
的概念蓝厌,之所以稱之為管線是因?yàn)?code>顯卡在處理數(shù)據(jù)的時(shí)候是按照?個(gè)固定的順序來的玄叠,?且嚴(yán)格按照這個(gè)順序。就像?從?根管?的?端流到另?端
褂始,這個(gè)順序是不能打破的.
- 劃重點(diǎn):
- 任務(wù)
嚴(yán)格按順序依次
執(zhí)行.
固定管線/存儲著?器
在早期的
OpenGL
版本,它封裝了很多種著?器程序塊內(nèi)置的?段包含了光照诸典、坐標(biāo)變換、裁剪
等等諸多功能的固定shader程序
來完成,來幫助開發(fā)者來完成圖形的渲染. ?開發(fā)者只需要傳?相應(yīng)的參數(shù),就能快速完成圖形的渲染. 類似于iOS開發(fā)會封裝很多API
,?我們只需要調(diào)?,就可以實(shí)現(xiàn)功能.不需要關(guān)注底層實(shí)現(xiàn)原理.但是由于
OpenGL
的使?場景?常豐富,固定管線
或存儲著?器
?法完成每?個(gè)業(yè)務(wù).這時(shí)將相關(guān)部分開放成可編程.
著?器程序Shader
- 就全?的將固定渲染管線架構(gòu)變?yōu)榱?code>可編程渲染管線崎苗。
因此狐粱,OpenGL在實(shí)際調(diào)?繪制函數(shù)之前,還需要指定?個(gè)
shader
編譯成的著?器程序胆数。常?的著?器主要有頂點(diǎn)著?器(VertexShader
)肌蜻,?段著?器(FragmentShader
)/像素著?器(PixelShader
),?何著?器(GeometryShader
)必尼,曲?細(xì)分著?器(TessellationShader
)蒋搜。?段著?器和像素著?器只是在OpenGL
和DX
中的不同叫法?已∨欣颍可惜的是豆挽,直到OpenGLES 3.0,依然只?持了頂點(diǎn)著?器
和?段著?器
這兩個(gè)最基礎(chǔ)的著?器券盅。OpenGL
在處理shader
時(shí)帮哈,和其他編譯器?樣。通過編譯锰镀、鏈接
等步驟娘侍,?成了著?器程序(glProgram)
咖刃,著?器程序同時(shí)包含了頂點(diǎn)著?器
和?段著?器
的運(yùn)算邏輯。在OpenGL
進(jìn)?繪制的時(shí)候憾筏,?先由頂點(diǎn)著?器對傳?的頂點(diǎn)數(shù)據(jù)進(jìn)?算再通過圖元
裝配嚎杨,將頂點(diǎn)轉(zhuǎn)換為圖元
。然后進(jìn)?光柵化
氧腰,將圖元這種?量圖形枫浙,轉(zhuǎn)換為柵格化數(shù)據(jù)
。最后容贝,將柵格化數(shù)據(jù)傳??段著?器中進(jìn)?運(yùn)算自脯。?段著?器會對柵格化數(shù)據(jù)中的每?個(gè)像素進(jìn)?運(yùn)算,并決定像素的顏?.
劃重點(diǎn):
- 將固定渲染管線架構(gòu)變成為了可編程渲染管線
- 常見的著色器主要有
頂點(diǎn)著色器
,片段著色器/像素著色器,幾何著色,曲面細(xì)分著色器. -
OPenGL ES
只支持頂點(diǎn)著色器和片段著色器. - OpenGL 通過編譯,鏈接等步驟,將生成著色器程序.
- 在OpenGL進(jìn)行繪制的時(shí)候,有
頂點(diǎn)著色器
對傳入的頂點(diǎn)數(shù)據(jù)進(jìn)行運(yùn)算.在通過圖元裝配,將頂點(diǎn)
轉(zhuǎn)換為圖元
.之后進(jìn)行光柵化
,將圖元這種矢量圖形,轉(zhuǎn)換為柵格化數(shù)據(jù).最后,將柵格化數(shù)據(jù)傳入片段著色器中進(jìn)行運(yùn)算.片段著色器會對柵格化數(shù)據(jù)中的每一個(gè)像素進(jìn)行運(yùn)算,并決定像素的顏色.
頂點(diǎn)著?器VertexShader
?般?來處理圖形每個(gè)頂點(diǎn)
變換(旋轉(zhuǎn)/平移/投影等)
頂點(diǎn)著?器是
OpenGL
中?于計(jì)算頂點(diǎn)
屬性的程序斤富。頂點(diǎn)著?器是逐頂點(diǎn)運(yùn)算的程序膏潮,也就是說每個(gè)頂點(diǎn)數(shù)據(jù)都會執(zhí)??次頂點(diǎn)著?器
,當(dāng)然這是并?的满力,并且頂點(diǎn)著?器運(yùn)算過程中?法訪問其他頂點(diǎn)的數(shù)據(jù)
.?般來說典型的需要計(jì)算的頂點(diǎn)屬性主要包括
頂點(diǎn)坐標(biāo)變換
焕参、逐頂點(diǎn)光照
運(yùn)算等等。頂點(diǎn)坐標(biāo)由?身坐標(biāo)系轉(zhuǎn)換到歸?化坐標(biāo)系的運(yùn)算油额,就是在這?發(fā)?的叠纷。
?元著?器程序FragmentShader
?般?來處理圖形中
每個(gè)像素點(diǎn)
顏?計(jì)算
和填充
。?段著?器
是OpenGL
中?于計(jì)算?段(像素)顏?的程序潦嘶。?段著?器是逐像素運(yùn)算的程序涩嚣,也就是說每個(gè)像素都會執(zhí)??次?段著?器,當(dāng)然也是并?的
.片元著色器(Fragment Shader)被稱為像素著色器(Pixel Shader)掂僵,但片元著色器是一個(gè)更合適的名字航厚,
因?yàn)榇藭r(shí)的片元并不是一個(gè)真正意義上的像素
GLSL
(OpenGL Shading Language)
-
OpenGL
著?語?(OpenGL Shading Language
)是?來在OpenGL
中著?編程的語?,也即開發(fā)?員寫的短?的?定義程序锰蓬,他們是在圖形卡的GPU
(Graphic Processor Unit圖形處理單元)上執(zhí)?的幔睬,代替了固定的渲染管線的?部分,使渲染管線中不同層次具有可編程性芹扭。?如:視圖轉(zhuǎn)換麻顶、投影轉(zhuǎn)換等。GLSL
(GL Shading Language)的著?器代碼分成2個(gè)部分:Vertex Shader(頂點(diǎn)著?器
)和Fragment(?斷著?器)
.
光柵化Rasterization
-
是把
頂點(diǎn)數(shù)據(jù)
轉(zhuǎn)換為?元
的過程舱卡,具有將圖
轉(zhuǎn)化為?個(gè)個(gè)柵格
組成的圖象
的作?辅肾,特點(diǎn)是每個(gè)元素
對應(yīng)幀緩沖區(qū)中的?像素
。 - 光柵化就是把
頂點(diǎn)數(shù)據(jù)
轉(zhuǎn)換為?元
的過程轮锥。?元
中的每?個(gè)元素對應(yīng)于幀緩沖區(qū)中
的?個(gè)像素
宛瞄。 - 光柵化其實(shí)是?種將
?何圖元
變?yōu)?code>?維圖像的過程。該過程包含了兩部分的?作。第?部分?作:決定窗?坐標(biāo)中的哪些整型柵格區(qū)域被基本圖元占?
份汗;第?部分?作:分配?個(gè)顏?值和?個(gè)深度值到各個(gè)區(qū)域
。光柵化過程產(chǎn)?的是?元. - 把物體的
數(shù)學(xué)描述
以及與物體相關(guān)
的顏?信息轉(zhuǎn)換為屏幕上?于對應(yīng)位置的像素
及?于填充像素的顏?
蝴簇,這個(gè)過程稱為光柵化
杯活,這是?個(gè)將模擬信號轉(zhuǎn)化為離散信號的過程.
紋理(Texture)
- 紋理可以理解為
圖?
. ?家在渲染圖形時(shí)需要在其編碼填充圖?
,為了使得場景更加逼真.?這?使?的圖?
,就是常說的紋理
.但是在OpenGL
,我們更加習(xí)慣叫紋理
,?不是圖?
.
混合(Blending)
- 在測試階段之后,如果
像素依然沒有被剔除
熬词,那么像素的顏?將會和幀緩沖區(qū)中顏?附著上的顏?進(jìn)?混合
旁钧,混合的算法可以通過OpenGL的函數(shù)
進(jìn)?指定。但是OpenGL
提供的混合算法是有限的互拾,如果需要更加復(fù)雜的混合算法
歪今,?般可以通過像素著?器
進(jìn)?實(shí)現(xiàn),當(dāng)然性能會?原?的混合算法
差?些.
變換矩陣(Transformation)
- 例如圖形想發(fā)?平移,縮放,旋轉(zhuǎn)變換.就需要使?變換矩陣.
投影矩陣(Projection)
- ?于將
3D坐標(biāo)
轉(zhuǎn)換為?維屏幕坐標(biāo),實(shí)際線條也將在?維坐標(biāo)下進(jìn)?繪制
渲染上屏/交換緩沖區(qū)(SwapBuffer
)
- 渲染緩沖區(qū)?般映射的是
系統(tǒng)的資源
?如窗?颜矿。如果將圖像直接渲染到窗?對應(yīng)的渲染緩沖區(qū)
寄猩,則可以將圖像顯示到屏幕上
。 - 但是骑疆,值得注意的是田篇,如果每個(gè)窗?只有?個(gè)
緩沖區(qū)
,那么在繪制過程中屏幕進(jìn)?了刷新箍铭,窗?可能顯示出不完整的圖像 - 為了解決這個(gè)問題泊柬,常規(guī)的
OpenGL
程序?少都會有兩個(gè)緩沖區(qū)
。顯示在屏幕上的稱為屏幕緩沖區(qū)
诈火,沒有
顯示的稱為離屏緩沖區(qū)
兽赁。在?個(gè)緩沖區(qū)渲染完成之后,通過將屏幕緩沖區(qū)和離屏緩沖區(qū)交換冷守,實(shí)現(xiàn)圖像
在屏幕上的顯示刀崖。 - 由于顯示器的刷新?般是逐?進(jìn)?的,因此為了
防?交換緩沖區(qū)的時(shí)候屏幕上下區(qū)域的圖像分屬于兩個(gè)不同的幀
教沾,因此交換?般會等待
顯示器刷新完成的信號蒲跨,在顯示器兩次刷新的間隔中進(jìn)?交換
,這個(gè)信號就被稱為垂直同步信號
授翻,這個(gè)技術(shù)被稱為垂直同步
. - 使?了
雙緩沖區(qū)
和垂直同步技術(shù)
之后或悲,由于總是要等待緩沖區(qū)交換之后再進(jìn)?下?幀
的渲染,使得幀率?法完全達(dá)到硬件允許的最??平
堪唐。為了解決這個(gè)問題巡语,引?了三緩沖區(qū)技術(shù)
,在等待垂直同步時(shí)淮菠,來回交替渲染兩個(gè)離屏的緩沖區(qū)男公,?垂直同步發(fā)?時(shí)
,屏幕緩沖區(qū)和最近渲染完成的離屏緩沖區(qū)交換
合陵,實(shí)現(xiàn)充分利?硬件性能的?的
.
劃重點(diǎn):
- 如果每個(gè)
窗?
只有?個(gè)緩沖區(qū)
枢赔,若在繪制過程中屏幕進(jìn)?了刷新
澄阳,窗?可能顯示出不完整
的圖像。為了解決這個(gè)問題踏拜,常規(guī)的OpenGL程序
?少都會有兩個(gè)緩沖區(qū)
碎赢。 - 垂直同步:由于顯示器的刷新?般是
逐?進(jìn)?的
,為了防?交換緩沖區(qū)
的時(shí)候屏幕上下區(qū)域的圖像
分屬于兩個(gè)不同的幀
速梗,交換一般會等待顯示器刷新完成的信號肮塞,在顯示器器兩次刷新的間隔中進(jìn)?交換,這個(gè)信號就被稱為垂直同步信號
姻锁,這個(gè)技術(shù)被稱為垂直同步
枕赵。 - 三緩沖區(qū)技術(shù):使用了
雙緩沖區(qū)
和垂直同步技術(shù)
之后,由于總是要等待緩沖區(qū)交換之后
再進(jìn)?下?幀的渲染位隶,使得幀率無法完全達(dá)到硬件允許的最??平拷窜。為了解決這個(gè)問題,引?了三緩沖區(qū)技術(shù)
钓试。在等待垂直同步時(shí)装黑,來回交替渲染兩個(gè)離屏的緩沖區(qū),?垂直同步發(fā)?生時(shí)弓熏,屏幕緩沖區(qū)和最近渲染完成的離屏緩沖區(qū)交換恋谭,實(shí)現(xiàn)充分利利?硬件性能的?的。