直播技術(四) —— 禮物渲染方案(一)

版本記錄

版本號 時間
V1.0 2021.02.13 星期六

前言

最近在兩家公司任職做的都是直播相關的業(yè)務续扔,音視頻的門檻現(xiàn)在是越來越低,很多的三方視頻云等都支持直播相關的業(yè)務菠净,從推流拉流到美顏扒袖、濾鏡、貼紙甚至人體識別等都有很多的第三方公司支持混聊。但是,好一點的公司還是自己研發(fā)自己的視頻云SDK乾巧,這樣可以不受三方束縛句喜,定制性也更好些,相信看過我寫過的文章的人卧抗,發(fā)現(xiàn)了我寫過和直播相關的技術藤滥,這里我另起一個模塊和大家繼續(xù)分享直播相關技術,感興趣的就給個贊支持一下社裆。感興趣看上面幾篇文章。
1. 直播技術(一) —— 移動直播連麥幾種處理方案(一)
2. 直播技術(二) —— 直播間的上下切換(一)
3. 直播技術(三) —— 直播間的PK流程(一)

禮物渲染技術

當我們從服務器上拉取禮物收到消息的時候向图,就需要在看播端和主播端進行渲染泳秀。從17年開始做直播的這些業(yè)務開始,就是從序列幀到現(xiàn)在的264禮物榄攀。算是做過了幾次修改和方案的替換嗜傅,下面就一起看一下這三種方案和各自的優(yōu)缺點。

1. 序列幀

  • 缺點:8bit色域比較窄檩赢,占用帶寬比較大吕嘀,特別是android端。
  • 優(yōu)點:更好的適應性贞瞒,不同平臺播放無需更多的經(jīng)歷進行調(diào)試和適配偶房。

這里遇見了個小插曲,前幾天去阿里面試军浆,也拿到了口頭offer棕洋,但是面試的時候我說到了這個問題,面試官認為只有GIF才有8bits調(diào)色板色域窄的問題乒融,Png不存在這個問題掰盘。其實這個問題摄悯,很好說明。Png有8bits愧捕,24bits和32bits奢驯,其中8bit可以使用調(diào)色板編碼會小一些,而Gif必須是8bits次绘。這個在Png標準里都有說明叨橱。

所以Png也存在8bits調(diào)色板色域窄的問題。

2. webm禮物

webm格式來自于googleVp8(264)vp9(265)断盛,webm還可以細分為三種

1)第一種是無損壓縮(webp罗洗,png,7z等)
2)第二種是RGB和A分開壓縮和解壓(兩個webm)钢猛,這個就是需要做對齊的伙菜,缺點很明顯就是RGB跟隨A對齊比較麻煩,容易出錯命迈。
3)第三種是A和RGB同一壓縮比(一個webm贩绕,左右分屏),這個不用做對齊壶愤,但是會犧牲一定的的A值淑倾,所以這是一個權衡和折中方案。

  • 優(yōu)點:色域比較寬征椒,不會受限于序列幀的8bit的限制娇哆。
  • 缺點:CPU占用和損耗比較大

3. h264方案

  • 優(yōu)點:利用手機端的硬件進行硬解碼加快解碼速度,減少內(nèi)存占用勃救,同時加快速度
  • 缺點:暫時沒有啥缺點

從目前軟硬件發(fā)展形勢看碍讨,這個已經(jīng)是近似最優(yōu)解了。

后記

本篇主要講述了禮物渲染方案蒙秒,感興趣的給個贊或者關注~~~

最后編輯于
?著作權歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末勃黍,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子晕讲,更是在濱河造成了極大的恐慌覆获,老刑警劉巖,帶你破解...
    沈念sama閱讀 217,657評論 6 505
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件瓢省,死亡現(xiàn)場離奇詭異弄息,居然都是意外死亡,警方通過查閱死者的電腦和手機净捅,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,889評論 3 394
  • 文/潘曉璐 我一進店門疑枯,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人蛔六,你說我怎么就攤上這事荆永》贤ぃ” “怎么了?”我有些...
    開封第一講書人閱讀 164,057評論 0 354
  • 文/不壞的土叔 我叫張陵具钥,是天一觀的道長豆村。 經(jīng)常有香客問我,道長骂删,這世上最難降的妖魔是什么掌动? 我笑而不...
    開封第一講書人閱讀 58,509評論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮宁玫,結(jié)果婚禮上粗恢,老公的妹妹穿的比我還像新娘。我一直安慰自己欧瘪,他們只是感情好眷射,可當我...
    茶點故事閱讀 67,562評論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著佛掖,像睡著了一般妖碉。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上芥被,一...
    開封第一講書人閱讀 51,443評論 1 302
  • 那天欧宜,我揣著相機與錄音,去河邊找鬼拴魄。 笑死冗茸,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的羹铅。 我是一名探鬼主播蚀狰,決...
    沈念sama閱讀 40,251評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼职员!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起跛溉,我...
    開封第一講書人閱讀 39,129評論 0 276
  • 序言:老撾萬榮一對情侶失蹤焊切,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后芳室,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體专肪,經(jīng)...
    沈念sama閱讀 45,561評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,779評論 3 335
  • 正文 我和宋清朗相戀三年堪侯,在試婚紗的時候發(fā)現(xiàn)自己被綠了嚎尤。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 39,902評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡伍宦,死狀恐怖芽死,靈堂內(nèi)的尸體忽然破棺而出乏梁,到底是詐尸還是另有隱情,我是刑警寧澤关贵,帶...
    沈念sama閱讀 35,621評論 5 345
  • 正文 年R本政府宣布遇骑,位于F島的核電站,受9級特大地震影響揖曾,放射性物質(zhì)發(fā)生泄漏落萎。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,220評論 3 328
  • 文/蒙蒙 一炭剪、第九天 我趴在偏房一處隱蔽的房頂上張望练链。 院中可真熱鬧,春花似錦奴拦、人聲如沸媒鼓。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,838評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽隶糕。三九已至,卻和暖如春站玄,著一層夾襖步出監(jiān)牢的瞬間枚驻,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,971評論 1 269
  • 我被黑心中介騙來泰國打工株旷, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留再登,地道東北人。 一個月前我還...
    沈念sama閱讀 48,025評論 2 370
  • 正文 我出身青樓晾剖,卻偏偏與公主長得像锉矢,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子齿尽,可洞房花燭夜當晚...
    茶點故事閱讀 44,843評論 2 354

推薦閱讀更多精彩內(nèi)容