iOS14 畫中畫調(diào)研

iOS14 畫中畫 調(diào)研

畫中畫(PictureInPicture)在iOS9就已經(jīng)推出了,不過之前都只能在iPad使用窿锉,iPhone要使用畫中畫就得更新到iOS14才能使用酵熙。

蘋果在iOS14中開放了手機端對畫中畫的支持轧简,方便在app退出前臺時仍然可以播放視頻。 畫中畫的開啟匾二,本質(zhì)上還是需要依賴系統(tǒng)播放器哮独,同時UI、動畫等都是系統(tǒng)原生提供的察藐,因此自定義空間很小皮璧。

目前有三種方式實現(xiàn)畫中畫:

  • WKWebView自帶
  • 如果對播放器要求不大的可以直接使用AVPlayerViewController,自身就提供畫中畫功能可直接使用分飞,設(shè)置allowsPictureInPicturePlayback = YES即可展示出畫中畫按鈕恶导。
  • 自定義的播放器要開啟畫中畫那就使用AVPictureInPictureController來包裝,也是很簡單易用浸须,并且動畫效果內(nèi)部已經(jīng)實現(xiàn)惨寿,只需要注意畫中畫按鈕需要用戶自己去實現(xiàn),畫中畫圖標系統(tǒng)已有相關(guān)APIpictureInPictureButtonStartImage删窒。

總共需要以下幾步:

  • 開啟后臺模式裂垦,即Xcode中后臺能力中的第一個勾選框

  • 創(chuàng)建AVPictureInPictureController(你一定要讓用戶通過操作(點擊按鈕等)來開始畫中畫顯示。 不能直接在代碼中直接startPictureInPicture ,這樣的話你的APP上架審核會被拒絕肌索,因為蘋果本身是不希望用戶自定義畫中畫的蕉拢。)

  • [AVPictureInPictureController isPictureInPictureSupported]允許的情況下,設(shè)置AVAudioSession的category為AVAudioSessionCategoryPlayback

  • 可以播放遵守HLS協(xié)議的.m3u8的直播,因為AVPlayer 不支持 flv诚亚,只能播放 hls 的流晕换。HLS是蘋果主導(dǎo)的音視頻傳輸協(xié)議,其主要的格式是一個索引文件(M3U8)+ ts分片的視頻文件站宗。

  • 如果業(yè)務(wù)使用系統(tǒng)播放器闸准,那么這里一般不會有問題,因為播放器已經(jīng)正確顯示了梢灭。但是如果業(yè)務(wù)使用了自定義播放器夷家,同時也希望具有畫中畫能力蒸其,那么通常會創(chuàng)建一個隱藏的系統(tǒng)播放器,作為畫中畫功能的承載库快。這時候就要注意保證用于渲染的view摸袁、layer正確地加入到了層級中

具體代碼如下:

// init player
    NSURL *url = [NSURL URLWithString:@"https://devstreaming-cdn.apple.com/videos/streaming/examples/bipbop_16x9/bipbop_16x9_variant.m3u8"];
    //使用playerItem初始化AVPlayer的目的是為了監(jiān)聽播放器的`status`狀態(tài)
    self.playerItem = [AVPlayerItem playerItemWithURL:url];
    [self.playerItem addObserver:self
                 forKeyPath:@"status"
                    options:NSKeyValueObservingOptionOld | NSKeyValueObservingOptionNew
                    context:nil];
    self.player = [[AVPlayer alloc] initWithPlayerItem:self.playerItem ];
    
    // init player layer
    AVPlayerLayer * playerLayer = (AVPlayerLayer *)self.playerView.layer;
    playerLayer.player = self.player;
    
    // init pip controller
    self.pipController = [[AVPictureInPictureController alloc] initWithPlayerLayer:playerLayer];
    self.pipController.delegate = self;
    //監(jiān)聽'pictureInPicturePossible'是為了讓自定義的畫中畫按鈕是否顯示/隱藏 或者 能否點擊义屏,因為有些時候即使設(shè)備支持靠汁,但是需要AVPlayer等到直播流可以播放的一個狀態(tài)才可以為possible
    [self.pipController addObserver:self
                         forKeyPath:@"pictureInPicturePossible"
                            options:NSKeyValueObservingOptionOld | NSKeyValueObservingOptionNew
                            context:nil];

   if ([AVPictureInPictureController isPictureInPictureSupported]) {
        NSLog(@"該設(shè)備支持畫中畫功能");
        //開啟畫中畫后臺聲音權(quán)限
        NSError *error = nil;
        [[AVAudioSession sharedInstance] setCategory:AVAudioSessionCategoryPlayback error:&error];
        [[AVAudioSession sharedInstance] setActive:YES error:nil];
        if (error) {
            NSLog(@"請求權(quán)限失敗的原因為%@",error);
        }
    } else {
        NSLog(@"該設(shè)備不支持畫中畫功能");
    }
    
    //在點擊畫中畫按鈕的時候 開啟畫中畫
     if (self.pipController.isPictureInPictureActive) {
        [self.pipController stopPictureInPicture];
    } else {
        [self.pipController startPictureInPicture];
    }
    
    //status狀態(tài)一共三種 可以在不同的狀態(tài)下設(shè)置不同的交互
    AVPlayerItemStatusReadyToPlay:
    AVPlayerItemStatusFailed:
    AVPlayerItemStatusUnknown:
    

注意點:
一、 AVPictureInPictureController的初始化通過將要展示視頻的視圖的view的 AVPlayerLayer來初始化闽铐。為了達到這種目的視頻播放的視圖的layer返回應(yīng)該是AVPlayerLayer蝶怔,重寫+layerClass方法使得在創(chuàng)建的時候能返回一個不同的圖層子類。UIView會在初始化的時候調(diào)用+layerClass方法阳啥,然后用它的返回類型來創(chuàng)建宿主圖層。即需要在展示視頻的view視圖里有如下類方法

+ (Class)layerClass {
    return [AVPlayerLayer class];
}

二财喳、 startPictureInPicture并不是立馬觸發(fā)察迟,而是需要在視頻可以開始播放時才允許打開。所以如果不加載一個本地加載的動畫視頻的話耳高,界面上不會立馬顯示出畫中畫扎瓶,給用戶造成一種不靈敏的感覺。所以 先循環(huán)播放一個本地的 loading 視頻來開啟畫中畫泌枪,同時等待直播可以開始播放時概荷,再將畫中畫的畫面切換成真正的直播內(nèi)容。

三碌燕、 因為AVPlayer只能播放本地視頻或者HLS直播流误证,而AVPictureInPictureController的初始化需要用到AVPlayer。但公司目前的設(shè)備推流機制是直接客戶端接受YUV數(shù)據(jù)并用OpenGL渲染修壕,沒有經(jīng)過服務(wù)器取流愈捅,所以畫中畫暫時無法實現(xiàn)。

實現(xiàn)步驟:如果現(xiàn)在不支持慈鸠,后續(xù)如果想實現(xiàn)的話蓝谨,可以在點擊畫中畫后去服務(wù)請求視頻的HLS直播地址,和一些token的驗證拼接青团,之后將其賦值給self.playLayer.player = [AVPlayer playerWithURL:[NSURL URLWithString:urlStr]];譬巫,之后就可以開啟畫中畫了。否則就按失敗處理督笆。

//歡迎大家交流并指出錯誤芦昔,謝謝

官方文檔

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市娃肿,隨后出現(xiàn)的幾起案子烟零,更是在濱河造成了極大的恐慌瘪松,老刑警劉巖,帶你破解...
    沈念sama閱讀 216,651評論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件锨阿,死亡現(xiàn)場離奇詭異宵睦,居然都是意外死亡,警方通過查閱死者的電腦和手機墅诡,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,468評論 3 392
  • 文/潘曉璐 我一進店門壳嚎,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人末早,你說我怎么就攤上這事烟馅。” “怎么了然磷?”我有些...
    開封第一講書人閱讀 162,931評論 0 353
  • 文/不壞的土叔 我叫張陵郑趁,是天一觀的道長。 經(jīng)常有香客問我姿搜,道長寡润,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,218評論 1 292
  • 正文 為了忘掉前任舅柜,我火速辦了婚禮梭纹,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘致份。我一直安慰自己变抽,他們只是感情好,可當我...
    茶點故事閱讀 67,234評論 6 388
  • 文/花漫 我一把揭開白布氮块。 她就那樣靜靜地躺著绍载,像睡著了一般。 火紅的嫁衣襯著肌膚如雪滔蝉。 梳的紋絲不亂的頭發(fā)上逛钻,一...
    開封第一講書人閱讀 51,198評論 1 299
  • 那天,我揣著相機與錄音锰提,去河邊找鬼曙痘。 笑死,一個胖子當著我的面吹牛立肘,可吹牛的內(nèi)容都是我干的边坤。 我是一名探鬼主播,決...
    沈念sama閱讀 40,084評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼谅年,長吁一口氣:“原來是場噩夢啊……” “哼茧痒!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起融蹂,我...
    開封第一講書人閱讀 38,926評論 0 274
  • 序言:老撾萬榮一對情侶失蹤旺订,失蹤者是張志新(化名)和其女友劉穎弄企,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體区拳,經(jīng)...
    沈念sama閱讀 45,341評論 1 311
  • 正文 獨居荒郊野嶺守林人離奇死亡拘领,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,563評論 2 333
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了樱调。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片约素。...
    茶點故事閱讀 39,731評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖笆凌,靈堂內(nèi)的尸體忽然破棺而出圣猎,到底是詐尸還是另有隱情,我是刑警寧澤乞而,帶...
    沈念sama閱讀 35,430評論 5 343
  • 正文 年R本政府宣布送悔,位于F島的核電站,受9級特大地震影響爪模,放射性物質(zhì)發(fā)生泄漏欠啤。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,036評論 3 326
  • 文/蒙蒙 一呻右、第九天 我趴在偏房一處隱蔽的房頂上張望跪妥。 院中可真熱鬧鞋喇,春花似錦声滥、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,676評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至罐韩,卻和暖如春憾赁,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背散吵。 一陣腳步聲響...
    開封第一講書人閱讀 32,829評論 1 269
  • 我被黑心中介騙來泰國打工龙考, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人矾睦。 一個月前我還...
    沈念sama閱讀 47,743評論 2 368
  • 正文 我出身青樓晦款,卻偏偏與公主長得像,于是被迫代替她去往敵國和親枚冗。 傳聞我的和親對象是個殘疾皇子缓溅,可洞房花燭夜當晚...
    茶點故事閱讀 44,629評論 2 354

推薦閱讀更多精彩內(nèi)容