在直播行業如火如荼的今天,直播系統開發成了熱門話題,而其中在直播系統開發的技術和直播優化層面也成了行業內關注的焦點。今日小編就對技術層面和直播優化層面的經驗分享一下。
1.技術實現層面:
技術相對都比較成熟,設備也都支持硬編碼。IOS還提供現成的Video ToolBox框架,可以對攝像頭和流媒體數據結構進行處理,但Video ToolBox框架只兼容8.0以上版本,8.0以下就需要用x264的庫軟編了。
github上有現成的開源實現,推流、美顏、水印、彈幕、點贊動畫、濾鏡、播放都有。技術其實不是很難,而且現在很多云廠商都提供SDK,七牛云、金山云、樂視云、騰訊云、百度云、斗魚直播伴侶推流端,功能幾乎都是一樣的,沒啥亮點,不同的是整個直播平臺服務差異和接入的簡易性。后端現在RTMP/HTTP-FLV清一色,App掛個源站直接接入云廠商或CDN就OK。
2.直播優化層面
其實最難的難點是提高首播時間、服務質量即Qos(Quality of Service,服務質量),如何在丟包率20%的情況下還能保障穩定、流暢的直播體驗,需要考慮以下方案:
1.為加快首播時間,收流服務器主動推送GOP
:(Group of Pictures:策略影響編碼質量)所謂GOP,意思是畫面組,一個GOP就是一組連續的畫面至邊緣節點,邊緣節點緩存GOP,播放端則可以快速加載,減少回源延遲。
2.GOP丟幀,為解決延時,為什么會有延時,網絡抖動、網絡擁塞導致的數據發送不出去,丟完之后所有的時間戳都要修改,切記,要不客戶端就會卡一個GOP的時間,是由于PTS(Presentation Time Stamp,PTS主要用于度量解碼后的視頻幀什么時候被顯示出來)和DTS的原因,或者播放器修正DTS和PTS也行(推流端丟GOD更復雜,丟p幀之前的i幀會花屏)
3.純音頻丟幀,要解決音視頻不同步的問題,要讓視頻的delta增量到你丟掉音頻的delta之后,再發音頻,要不就會音視頻不同步
4.源站主備切換和斷線重連
5.根據TCP擁塞窗口做智能調度,當擁塞窗口過大說明節點服務質量不佳,需要切換節點和故障排查
6.增加上行、下行帶寬探測接口,當帶寬不滿足時降低視頻質量,即降低碼率
7.定時獲取最優的推流、拉流鏈路IP,盡可能保證提供最好的服務
8.監控必須要,監控各個節點的Qos狀態,來做整個平臺的資源配置優化和調度
直播過程.
9.如果產品從推流端、CDN、播放器都是自家的,保障Qos優勢非常大
10.當直播量非常大時,要加入集群管理和調度,保障Qos
11.播放端通過增加延時來減少網絡抖動,通過快播來減少延時