1. 前言
近期在研究h264/h265裸流保存為mp4,因?yàn)橹熬蛯戇^這方面的demo翠订,所以自我感覺應(yīng)該很快就能搞定家凯,結(jié)果碰到了h265視頻保存成功后程帕,用蘋果電腦的QuickTime Player播放提示"文件與 QuickTime Player 不兼容",以此篇文章記錄定位與解決問題的全過程
2. 實(shí)現(xiàn)思路
使用ffmpeg實(shí)現(xiàn)词爬,主要接口如下
avformat_write_header寫入mp4協(xié)議中相對(duì)靠前的字段信息
av_interleaved_write_frame往mdat容器中寫入幀數(shù)據(jù)
av_write_trailer往moov容器寫入幀的索引信息等
3. 問題
-
使用QuickTime Player打開提示如下秃嗜,使用vlc等播放器播放正常
圖1 -
播放器無法獲取到第一幀
圖2
4. 定位
- 同樣使用h265編碼的mp4視頻與該文件進(jìn)行對(duì)比發(fā)現(xiàn)权均,在stbl容器的stsd容器下顿膨,可以播放的視頻為hvc1容器,而無法播放的視頻叽赊,為hev1容器恋沃,熟悉mp4協(xié)議的同學(xué)應(yīng)該知道,這個(gè)字段對(duì)于h264編碼的視頻必指,一般都會(huì)是avcC容器囊咏,里面一般會(huì)存放sps與pps,因此自己判斷是該字段導(dǎo)致塔橡,所以從此方向開始尋找梅割,比對(duì)圖如圖3
圖3
-
同樣使用工具分析比對(duì),發(fā)現(xiàn)不能獲取到第一幀的視頻在mp4容器中葛家,缺少了一個(gè)stss容器部分户辞,查看mp4協(xié)議發(fā)現(xiàn),stss容器里存放的是關(guān)鍵幀的位置癞谒, 因此猜測是該缺少該容器導(dǎo)致底燎,比對(duì)圖如圖4
圖4
5. 解決
- 因?yàn)橹皩?duì)mp4協(xié)議有過一定研究,知道這些容器格式都是在寫入moov容器里完成的弹砚,因此從av_write_trailer源碼開始入手双仍,以下是函數(shù)調(diào)用流程
- av_write_trailer -> mov_write_trailer -> mov_write_moov_tag -> mov_write_trak_tag -> mov_write_mdia_tag -> mov_write_minf_tag -> mov_write_stbl_tag -> mov_write_stsd_tag -> mov_write_video_tag
- 在mov_write_video_tag函數(shù)里發(fā)現(xiàn)調(diào)用了avio_wl32(pb, track->tag),原來這個(gè)track->tag在這里就是'hev1'的小端表示桌吃,因此接下來只需要找到MOVTrack的tag在哪被賦值即可
- 斷點(diǎn)調(diào)試顯示是在avformat_write_header -> avformat_init_output -> init_muxer -> mov_init -> mov_find_codec_tag -> mov_get_codec_tag中返回的tag朱沃,是來自AVStream的AVCodecParameters的tag,因此最后在avformat_write_header前將AVCodecParameters的tag賦值為MKTAG('h', 'v', 'c', '1')茅诱,問題解決
- 另外逗物,ffmpeg命令行要生成QuickTime Player可以播放的h265視頻,命令行參數(shù)中加入 -vtag hvc1 即可
- 找到寫stss容器的函數(shù)让簿,也就是mov_write_stss_tag敬察,函數(shù)調(diào)用如下
- mov_write_stbl_tag -> mov_write_stss_tag,調(diào)用條件為track->has_keyframes && track->has_keyframes < track->entry二者皆成立尔当,于是去尋找哪里對(duì)MOVTrack的has_keyframes有賦值
- ff_mov_write_packet函數(shù)中僅在pkt->flags & AV_PKT_FLAG_KEY成立時(shí)對(duì)has_keyframes++莲祸,因此知道自己需要在關(guān)鍵幀寫入之前蹂安,設(shè)置AVPacket的flags,于是加入代碼pkt.flags = pkt.flags | AV_PKT_FLAG_KEY锐帜,問題解決
6. 總結(jié)
- 遇到網(wǎng)上沒有太多答案的問題田盈,在時(shí)間與能力許可的范圍內(nèi),盡量從源碼去定位與解決缴阎,這樣你會(huì)發(fā)現(xiàn)自己對(duì)于知識(shí)點(diǎn)的學(xué)習(xí)更加系統(tǒng)
- Demo就不公開了允瞧,因?yàn)楦F(xiàn)公司業(yè)務(wù)相關(guān),大家體諒一下蛮拔,有問題留言私信都可
7. 參考文章
FFmpeg命令行:如何壓制與QuickTime兼容的HEVC視頻
MOV及MP4文件格式中幾個(gè)重要的Table