使用Doubango+FreeSWITCH構(gòu)建視頻會議系統(tǒng)

時間如梭,就要到給丈母娘送月餅的時間了再愈。
記錄一下上半年主要折騰的東東缰泡,使用傳統(tǒng)的VoIP方案提供手機實時音視頻聊天通訊SDK近迁。
服務(wù)器做混流轉(zhuǎn)發(fā),相比網(wǎng)狀模型菱农,減少了手機客戶端帶寬和性能方面的壓力缭付,服務(wù)器混完后的媒體流還可以分發(fā)到RTMP CDN,這樣其它觀眾可以通過CDN拉流循未。
前后端都是用開源的項目蛉腌,挺想?yún)⑴c到自研的視頻會議系統(tǒng)的研發(fā)中,但是xxx,基本是我和另外一個同事在整烙丛。

服務(wù)端

OpenSIPS 1.11.x 負(fù)載均衡 + FreeSWITCH 1.6.x
閱讀官方wiki和自帶的sammple配置文件舅巷,官方wiki并沒有及時更新,有些不清楚的通過搜索下源碼基本能猜出來河咽。
OpenSIPS dispatcher分發(fā)注冊钠右,load_balancer分發(fā)呼叫,可以參考Tutorials-LoadBalancing
一開始面對 opensips.cfg route 腳本挺懵逼的忘蟹,通過調(diào)試看xlog打印日志慢慢知道了個大概飒房,也通過dialog解決了呼叫同一個會議號碼能夠保證分發(fā)到同一個FS服務(wù)器節(jié)點。
除了官方wiki外媚值,下面的資料十分好:

  • 杜金房老師的《FreeSWITCH權(quán)威指南》狠毯,非常受用,詳讀了2遍褥芒。FS mod_av 模塊也是杜老師貢獻的嚼松,我大概看了下,對于LibAV的使用mod_av還有可以優(yōu)化的地方锰扶。
  • 余洪涌老師的《百問FreeSwitch》
  • 老黑老師的《使用OpenSER構(gòu)建電話通信系統(tǒng)》
  • RFC文檔 3261 2327 等都有中文翻譯版本

客戶端

基于 iOS idoubs 和 Android imsdroid 基礎(chǔ)上修改和優(yōu)化献酗。
Doubango 這個框架官方基本不維護了,Github 上面也掛了很多issue沒有解決坷牛,所以慢慢填這些坑罕偎。
框架實現(xiàn)的很好,用ANSI C寫出了面向?qū)ο筇茁肪┤颍K化颜及,很值得學(xué)習(xí)。
把GPUImage拿過來蹂楣,加了美顏效果器予,增加更多的分辨率輸出,iOS OC層是用MRC的捐迫,有個引用計數(shù)crash查了n久乾翔,有些問題idoubs已經(jīng)解決了并沒有同步到imsdroid中等等。
卡頓花屏挺嚴(yán)重施戴,修改了重傳和碼率自適應(yīng)代碼反浓,還是會有花屏卡頓現(xiàn)象,待優(yōu)化赞哗。

計劃

  • 繼續(xù)優(yōu)化Doubango客戶端
  • 嘗試其它開源客戶端linphone雷则,pjsip等
  • 嘗試WebRTC使用sip信令跟FreeSWITCH搭配
  • 嘗試WebRTC + licode
  • 體驗其它公司實時通訊SDK
  • 傳統(tǒng)CDN廠家已經(jīng)開始在研發(fā)WebRTC服務(wù)器
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市肪笋,隨后出現(xiàn)的幾起案子月劈,更是在濱河造成了極大的恐慌度迂,老刑警劉巖,帶你破解...
    沈念sama閱讀 217,277評論 6 503
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件猜揪,死亡現(xiàn)場離奇詭異惭墓,居然都是意外死亡,警方通過查閱死者的電腦和手機而姐,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,689評論 3 393
  • 文/潘曉璐 我一進店門腊凶,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人拴念,你說我怎么就攤上這事钧萍。” “怎么了政鼠?”我有些...
    開封第一講書人閱讀 163,624評論 0 353
  • 文/不壞的土叔 我叫張陵风瘦,是天一觀的道長。 經(jīng)常有香客問我公般,道長万搔,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,356評論 1 293
  • 正文 為了忘掉前任俐载,我火速辦了婚禮蟹略,結(jié)果婚禮上登失,老公的妹妹穿的比我還像新娘遏佣。我一直安慰自己,他們只是感情好揽浙,可當(dāng)我...
    茶點故事閱讀 67,402評論 6 392
  • 文/花漫 我一把揭開白布状婶。 她就那樣靜靜地躺著,像睡著了一般馅巷。 火紅的嫁衣襯著肌膚如雪膛虫。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,292評論 1 301
  • 那天钓猬,我揣著相機與錄音稍刀,去河邊找鬼。 笑死敞曹,一個胖子當(dāng)著我的面吹牛账月,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播澳迫,決...
    沈念sama閱讀 40,135評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼局齿,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了橄登?” 一聲冷哼從身側(cè)響起抓歼,我...
    開封第一講書人閱讀 38,992評論 0 275
  • 序言:老撾萬榮一對情侶失蹤讥此,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后谣妻,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體萄喳,經(jīng)...
    沈念sama閱讀 45,429評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,636評論 3 334
  • 正文 我和宋清朗相戀三年拌禾,在試婚紗的時候發(fā)現(xiàn)自己被綠了取胎。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 39,785評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡湃窍,死狀恐怖闻蛀,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情您市,我是刑警寧澤觉痛,帶...
    沈念sama閱讀 35,492評論 5 345
  • 正文 年R本政府宣布,位于F島的核電站茵休,受9級特大地震影響薪棒,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜榕莺,卻給世界環(huán)境...
    茶點故事閱讀 41,092評論 3 328
  • 文/蒙蒙 一俐芯、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧钉鸯,春花似錦吧史、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,723評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至岩睁,卻和暖如春钞脂,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背捕儒。 一陣腳步聲響...
    開封第一講書人閱讀 32,858評論 1 269
  • 我被黑心中介騙來泰國打工冰啃, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人刘莹。 一個月前我還...
    沈念sama閱讀 47,891評論 2 370
  • 正文 我出身青樓阎毅,卻偏偏與公主長得像,于是被迫代替她去往敵國和親栋猖。 傳聞我的和親對象是個殘疾皇子净薛,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,713評論 2 354

推薦閱讀更多精彩內(nèi)容