1.概述
常用的流媒體協(xié)議主要有:
- 基于 RTSP/RTP 的實(shí)時(shí)流媒體協(xié)議
- HTTP 漸進(jìn)下載
- 基于瀏覽器插件抹蚀,頁面嵌入一個(gè) flash 播放器
內(nèi)嵌 flash 的方式必須要有瀏覽器支持。這樣的方式已經(jīng)被各大瀏覽器放棄邓梅,在谷歌瀏覽器中已經(jīng)不再支持flash耳峦。本文不再說明乞旦。
這三種方式完全不同,在開發(fā)階段技術(shù)選型時(shí),又和 開發(fā)的方向是 C/S 程序或者 B/S 程序相關(guān)。目前比較方便又好用的是用 HTTP 漸進(jìn)下載方法娘赴。
2.知識(shí)
2.1 傳輸協(xié)議
RTMP关顷、RTSP平痰、HTTP協(xié)議,這些是互聯(lián)網(wǎng) TCP/IP 五層體系結(jié)構(gòu)中應(yīng)用層的協(xié)議损趋,都可以用來做視頻直播或點(diǎn)播。通常來說梧油,直播一般用 RTMP呀枢、RTSP
,點(diǎn)播用 HTTP
。
概念
RTMP: 即 Real Time Messaging Protocol(實(shí)時(shí)消息傳輸協(xié)議),基于TCP轻庆,是一種設(shè)計(jì)用來進(jìn)行實(shí)時(shí)數(shù)據(jù)通信的網(wǎng)絡(luò)協(xié)議余爆。主要用來在
流媒體/交互服務(wù)器
之間進(jìn)行音視頻和數(shù)據(jù)通信
RTSP: 即 Real Time Streaming Protocol (實(shí)時(shí)流傳輸協(xié)議)亚隅,它使用TCP或UDP完成數(shù)據(jù)傳輸。使用RTSP時(shí)隘擎,客戶機(jī)和服務(wù)器都可以發(fā)出請(qǐng)求震桶,即RTSP可以是
雙向
的逢净。
HTTP: 超文本傳輸協(xié)議(Hypertext Transfer Protocol,HTTP)是一個(gè)簡單的請(qǐng)求-響應(yīng)協(xié)議附鸽,它通常運(yùn)行在 TCP 之上轨奄。它是 請(qǐng)求-響應(yīng) 的方式,即 客戶端發(fā)出請(qǐng)求拒炎,服務(wù)端收到后做出響應(yīng)。
對(duì)比表
名稱 | 特征 | 傳輸?shù)膬?nèi)容 | 特征 | 傳輸方式 | 說明 |
---|---|---|---|---|---|
RTMP | 是流媒體協(xié)議 | 一般傳輸?shù)氖?flv挨务,f4v 格式流 | 基于TCP | 基于TCP | 它是Adobe 的私有協(xié)議 |
RTSP | 是流媒體協(xié)議 | 一般傳輸?shù)氖?ts击你、mp4 格式的流 | 可以雙向 ,即客戶機(jī)和服務(wù)器都可以發(fā)出請(qǐng)求 |
使用TCP或UDP完成數(shù)據(jù)傳輸 | 共有協(xié)議谎柄,并有專門機(jī)構(gòu)做維護(hù) |
HTTP協(xié)議 | 超文本傳輸協(xié)議丁侄,它不是流媒體協(xié)議 | 傳輸?shù)氖荋TML,瀏覽器使用 |
單向 朝巫,即客戶端發(fā)出請(qǐng)求鸿摇,服務(wù)端做出響應(yīng) |
基于TCP | 請(qǐng)求-響應(yīng)協(xié)議 |
2.2 后來呢
從上面我們看到 RTSP 不方便在 瀏覽器上使用。于是就有了這些解決方案劈猿。
HLS : 基于HTTP的自適應(yīng)碼率流媒體傳輸協(xié)議 (HTTP Live Streaming)拙吉,它是Apple的動(dòng)態(tài)碼率自適應(yīng)技術(shù)潮孽。它最初是蘋果公司針對(duì)移動(dòng)設(shè)備而開發(fā)的流。后來桌面也有很多應(yīng)用了筷黔,HTML5 是直接支持了往史。
WebRTC:即 網(wǎng)頁即時(shí)通信 ( Web Real-Time Communication)的縮寫,是一個(gè)支持網(wǎng)頁瀏覽器進(jìn)行實(shí)時(shí)語音對(duì)話或視頻對(duì)話的API佛舱。它實(shí)現(xiàn)了基于網(wǎng)頁的視頻會(huì)議(標(biāo)準(zhǔn)是WHATWG 協(xié)議)椎例,目的是通過瀏覽器提供簡單的javascript就可以達(dá)到實(shí)時(shí)通訊 (RTC))能力。
Flash Player: 基于瀏覽器插件请祖,頁面嵌入一個(gè) flash 播放器订歪。缺點(diǎn)是必須要有瀏覽器支持。這樣的方式已經(jīng)被各大瀏覽器放棄肆捕,在谷歌瀏覽器中已經(jīng)不再支持flash刷晋。
3. 流媒體相關(guān)的工具和庫
3.1 編碼解碼工具 FFmpeg
FFmpeg 是一個(gè)庫和工具的集合,用于處理多媒體內(nèi)容福压,如音頻掏秩、視頻、字幕和相關(guān)元數(shù)據(jù)荆姆。
常用到的功能有:
- 視頻采集
- 視頻格式轉(zhuǎn)換
- 視頻截圖
- 給視頻加水印
功能 | 說明 |
---|---|
視頻采集 | 采集攝像頭的圖像蒙幻,進(jìn)行屏幕錄制,將視頻流傳送給流媒體服務(wù)器胆筒,支持直播應(yīng)用邮破。 |
視頻格式轉(zhuǎn)換 | 視頻格式轉(zhuǎn)換,比如可以將多種視頻格式轉(zhuǎn)換為flv格式仆救。 |
視頻截圖 | 截取指定時(shí)間的縮略圖抒和。視頻抓圖,獲取靜態(tài)圖和動(dòng)態(tài)圖 |
給視頻加水印 | 可使用ffmpeg 視頻添加水印(logo) |
它包含了這些軟件包
庫 | 說明 |
---|---|
libavcodec | 提供多種格式的 視頻/音頻 編解碼器的實(shí)現(xiàn)彤蔽; |
libavformat | 用于各種音視頻封裝格式的生成和解析摧莽,包括獲取解碼所需信息以生成解碼上下文結(jié)構(gòu)和讀取音視頻幀等功能; |
libavutil | 包括散列顿痪、解壓縮器和其他實(shí)用程序函數(shù) |
libavfilter | 提供一種通過過濾器鏈改變解碼音頻和視頻的方法镊辕。 |
libavdevice | 提供訪問捕獲和回放設(shè)備的抽象。 |
libswresample | 實(shí)現(xiàn)音頻混合和重采樣例程蚁袭。 |
libswscale | 實(shí)現(xiàn)顏色轉(zhuǎn)換和縮放例程征懈。 |
FFmpeg 的 Github地址:https://github.com/FFmpeg/FFmpeg
它包含了這些工具
工具 | 說明 |
---|---|
Ffmpeg | 是一個(gè)用于操作、轉(zhuǎn)換和流媒體內(nèi)容的命令行工具箱揩悄。 |
Ffplay | 是一個(gè)極簡的多媒體播放器卖哎。 |
Ffprobe | 是一個(gè)簡單的多媒體內(nèi)容檢測(cè)分析工具。 |
附加的小工具 | 如aviocat, ismindex和qt-faststart。 |
還有這些工具
工具 | 說明 |
---|---|
libpostproc | 用于后期效果處理亏娜; |
ffsever | 一個(gè) HTTP 多媒體即時(shí)廣播串流服務(wù)器焕窝; |
3.2 SRS 簡單流媒體服務(wù)
SRS是一個(gè)簡單高效的實(shí)時(shí)視頻服務(wù)器,支持RTMP/WebRTC/HLS/HTTP-FLV/SRT/GB28181照藻。
3.3 OBS 推流
Open Broadcaster Software(簡稱 OBS)是一款好用的第三方開源程序直播流媒體內(nèi)容制作軟件袜啃,為用戶提供免費(fèi)使用,它可支持 OS X幸缕、Windows群发、Linux 操作系統(tǒng)
FFmpeg的命令行方式不太友好,可考慮使用主流的OBS開源推流軟件发乔,很多網(wǎng)絡(luò)主播都是用它做直播熟妓,該軟件支持本地視頻文件以及攝像頭推流。
軟件長這樣:
主站:https://obsproject.com/
Github: https://github.com/jp9000/OBS
3.3 播放
產(chǎn)生了媒體流栏尚,就可以播放了起愈。比較常用的 VLC 播放器。
VLC 是一款自由译仗、開源的跨平臺(tái)多媒體播放器及框架韵吨,可播放大多數(shù)多媒體文件玻褪,以及 DVD刻肄、音頻 CD玄柠、VCD 及各類流媒體協(xié)議。
3.4 DVR 錄像
DVR: SRS支持將RTMP流錄制成FLV或MP4文件咱圆。下面的描述以FLV為例笛辟,但是對(duì)MP4也是一樣的。
DVR的難點(diǎn)在于寫入flv和文件命名序苏,SRS的做法是隨機(jī)生成文件名手幢,用戶可以使用http-callback方式,使用外部程序記錄這個(gè)文件名忱详,或者改成自己要的文件命名方式围来。
4.參考
https://github.com/ossrs/srs/tree/3.0release#usage
https://gitee.com/ChinaFFmpeg/ffmpeg?utm_source=alading&utm_campaign=repo
http://www.ffmpeg.org/
https://baike.baidu.com/item/ffmpeg/2665727?fr=aladdin