在直播行業(yè)如火如荼的今天,直播系統(tǒng)開發(fā)成了熱門話題百拓,而其中在直播系統(tǒng)開發(fā)的技術(shù)和直播優(yōu)化層面也成了行業(yè)內(nèi)關(guān)注的焦點足陨。今日小編就對技術(shù)層面和直播優(yōu)化層面的經(jīng)驗分享一下。
1.技術(shù)實現(xiàn)層面:
技術(shù)相對都比較成熟踩衩,設(shè)備也都支持硬編碼。IOS還提供現(xiàn)成的Video ToolBox框架贩汉,可以對攝像頭和流媒體數(shù)據(jù)結(jié)構(gòu)進行處理驱富,但Video ToolBox框架只兼容8.0以上版本,8.0以下就需要用x264的庫軟編了匹舞。
github上有現(xiàn)成的開源實現(xiàn)褐鸥,推流、美顏赐稽、水印叫榕、彈幕、點贊動畫姊舵、濾鏡晰绎、播放都有。技術(shù)其實不是很難括丁,而且現(xiàn)在很多云廠商都提供SDK荞下,七牛云、金山云、樂視云锄弱、騰訊云考蕾、百度云、斗魚直播伴侶推流端会宪,功能幾乎都是一樣的肖卧,沒啥亮點,不同的是整個直播平臺服務(wù)差異和接入的簡易性掸鹅。后端現(xiàn)在RTMP/HTTP-FLV清一色塞帐,App掛個源站直接接入云廠商或CDN就OK。
2.直播優(yōu)化層面
其實最難的難點是提高首播時間巍沙、服務(wù)質(zhì)量即Qos(Quality of Service葵姥,服務(wù)質(zhì)量),如何在丟包率20%的情況下還能保障穩(wěn)定句携、流暢的直播體驗榔幸,需要考慮以下方案:
1.為加快首播時間,收流服務(wù)器主動推送GOP
:(Group of Pictures:策略影響編碼質(zhì)量)所謂GOP矮嫉,意思是畫面組削咆,一個GOP就是一組連續(xù)的畫面至邊緣節(jié)點,邊緣節(jié)點緩存GOP蠢笋,播放端則可以快速加載拨齐,減少回源延遲。
2.GOP丟幀昨寞,為解決延時瞻惋,為什么會有延時,網(wǎng)絡(luò)抖動援岩、網(wǎng)絡(luò)擁塞導(dǎo)致的數(shù)據(jù)發(fā)送不出去歼狼,丟完之后所有的時間戳都要修改,切記享怀,要不客戶端就會卡一個GOP的時間蹂匹,是由于PTS(Presentation Time Stamp,PTS主要用于度量解碼后的視頻幀什么時候被顯示出來)和DTS的原因凹蜈,或者播放器修正DTS和PTS也行(推流端丟GOD更復(fù)雜,丟p幀之前的i幀會花屏)
3.純音頻丟幀忍啸,要解決音視頻不同步的問題仰坦,要讓視頻的delta增量到你丟掉音頻的delta之后,再發(fā)音頻计雌,要不就會音視頻不同步
4.源站主備切換和斷線重連
5.根據(jù)TCP擁塞窗口做智能調(diào)度悄晃,當(dāng)擁塞窗口過大說明節(jié)點服務(wù)質(zhì)量不佳,需要切換節(jié)點和故障排查
6.增加上行、下行帶寬探測接口妈橄,當(dāng)帶寬不滿足時降低視頻質(zhì)量庶近,即降低碼率
7.定時獲取最優(yōu)的推流、拉流鏈路IP眷蚓,盡可能保證提供最好的服務(wù)
8.監(jiān)控必須要鼻种,監(jiān)控各個節(jié)點的Qos狀態(tài),來做整個平臺的資源配置優(yōu)化和調(diào)度
直播過程.
9.如果產(chǎn)品從推流端沙热、CDN叉钥、播放器都是自家的,保障Qos優(yōu)勢非常大
10.當(dāng)直播量非常大時篙贸,要加入集群管理和調(diào)度投队,保障Qos
11.播放端通過增加延時來減少網(wǎng)絡(luò)抖動,通過快播來減少延時