MP4分析

MP4文件分析
概述
MP4文件中的所有數(shù)據(jù)都裝在box(QuickTime中為atom)中跳座,也就是說(shuō)MP4文件由若干個(gè)box組成猛们,每個(gè)box有類型和長(zhǎng)度错览,可以將box理解為一個(gè)數(shù)據(jù)對(duì)象塊档押。box中可以包含另一個(gè)box琳骡,這種box稱為container box锅论。

  • 一個(gè)MP4文件首先會(huì)有且只有一個(gè)“ftyp”類型的box,作為MP4格式的標(biāo)志并包含關(guān)于文件的一些信息;

  • 之后會(huì)有且只有一個(gè)“moov”類型的box(Movie Box)楣号,它是一種container box最易,子box包含了媒體的metadata信息;

  • MP4文件的媒體數(shù)據(jù)包含在“mdat”類型的box(Midia Data Box)中竖席,該類型的box也是container box耘纱,可以有多個(gè)敬肚,也可以沒(méi)有(當(dāng)媒體數(shù)據(jù)全部引用其他文件時(shí))毕荐,媒體數(shù)據(jù)的結(jié)構(gòu)由metadata進(jìn)行描述。

mp4.jpg

文件結(jié)構(gòu)
整個(gè)文件由Box組成艳馒,所有的數(shù)據(jù)都在Box內(nèi)定義憎亚。Box可以層級(jí)嵌套员寇,例如,moov可以包含多個(gè)trak第美。

aligned(8) class Box (unsigned int(32) boxtype, optional unsigned int(8)[16] extended_type)   
{  
  unsigned int(32) size;  
  unsigned int(32) type = boxtype;  
  if (size==1)   
   {  
    unsigned int(64) largesize;  
   }   
   else if (size==0)   
   {  
     // box extends to end of file  
   }  
   if (boxtype==‘uuid’) {  
      unsigned int(8)[16] usertype = extended_type;  
   }  
}  

note: 就是說(shuō)一般情況下Box是以8個(gè)字節(jié)開頭蝶锋,接著就是Box的數(shù)據(jù)。這個(gè)8個(gè)字節(jié)分別表示size和type什往。size是整個(gè)Box的字節(jié)數(shù)扳缕,含size和type本身。type是4個(gè)可讀的字符别威。例如:File Type Box的type就ftyp躯舔。 標(biāo)準(zhǔn)的type都是4個(gè)字符,如果要自定義的type省古,則需要把type設(shè)為"uuid"粥庄,然后再附上16個(gè)字符作為自定義type.
參考代碼


以一個(gè)長(zhǎng)度為10秒的MP4為例,其結(jié)構(gòu)可能如下:
type: ftyp, size: 24
type: mdat, size: 8884701
type: mdat, size: 136125
type: moov, size: 4656

  1. ftyp
    一個(gè)ftyp對(duì)文件的類型進(jìn)行描述豺妓,指明其符合哪些格式惜互。一般就是mp4格式了。符合本文檔的媒體類型有很多種琳拭,box條目的種類也不同训堆,所以需要brand與compatible_brands的來(lái)說(shuō)明此文件內(nèi)的box的種類。文檔中定義了isom, avc1, iso2, mp71, iso3這些brand應(yīng)有的格式白嘁,當(dāng)解碼器在讀出其brand后蔫慧,就知道該文件的格式了。

aligned(8) class FileTypeBox extends Box(‘ftyp’) {  
  unsigned int(32) major_brand;  
  unsigned int(32) minor_version;  
  unsigned int(32) compatible_brands[]; // to end of the box  
}  
  1. mdat

上例中有2個(gè)mdat权薯,一個(gè)是視頻內(nèi)容姑躲、另一個(gè)音頻內(nèi)容。對(duì)于h264, aac編碼的媒體來(lái)說(shuō)盟蚣,其視頻mdat中內(nèi)容是nal黍析,對(duì)于音頻來(lái)說(shuō),其內(nèi)容為aac的一幀屎开。mdat中的幀依次存放阐枣,每個(gè)幀的位置、時(shí)間奄抽、長(zhǎng)度都由moov中的信息指定蔼两。可以看出逞度,mdat是很好組建的额划,這種Box只含有數(shù)據(jù)。


aligned(8) class MediaDataBox extends Box(‘mdat’) {  
   bit(8) data[];  
}  
  1. moov

moov存放影片的所有信息档泽,一個(gè)moov含有多個(gè)trak俊戳。通常對(duì)于一個(gè)片子來(lái)說(shuō)揖赴,就是一個(gè)視頻trak,一個(gè)音頻trak抑胎。MP4文件的重點(diǎn)也在于此燥滑。



(1) trak / tkhd
對(duì)于視頻trak,存寬阿逃、高信息铭拧;對(duì)于音頻trak,存音量信息恃锉。并不是太重要羽历,真正初始化解碼器要靠 stsd中的信息。
(2) trak / mdia / hdlr
標(biāo)明該trak是視頻還是音頻
(3) trak / mdia / minf / stbl
所有重要的表都在這里淡喜。其中秕磷,

  • stsd: 編碼器CODEC信息
  • stsz: 用于sample的劃分,通常一個(gè)sample可以對(duì)應(yīng)于frame炼团。
  • stsc: 多個(gè)sample組成一個(gè)trunk澎嚣,不過(guò)實(shí)際操作中可以讓一個(gè)sample直接構(gòu)成一個(gè)trunk
  • stco: trunk在文件中的位置,用于定位瘟芝。
  • stts / ctts: 指定每個(gè)sample的PTS, DTS
    (4) trak / edts / elst
    把視頻分為多段segment, 每個(gè)的起始時(shí)間和時(shí)長(zhǎng)易桃。

MP4快速拉流
參考鏈接: Optimizing MP4 Video for Fast Streaming

看這段

You can see the browser makes 3 requests before it can start playing the video. In the first request, the browser downloads the first 552 KB of the video using an [HTTP range request](https://en.wikipedia.org/wiki/Byte_serving). We can tell this by the 206 Partial Content HTTP response code, and by digging in and looking at the request headers. However the moov
 atom is not there so the browser cannot start to play the video. Next, the browser requests the final 21 KB of the video file using another range request. This does contain the moov
 atom, telling the browser where the video and audio streams start. Finally, the browser makes a third and final request to get the audio/video data and can start to play the video. This has wasted over half a megabyte of bandwidth and delayed the start of the video by 210 ms! Simply because the browser couldn’t find the moov
 atom.

如果將moov放到最前面,可以減少兩次請(qǐng)求锌俱,moov最重要的信息包括:stsd: 編碼器CODEC信息晤郑,(音視頻類型,寬高等)贸宏,所以說(shuō)造寝,放在前面的話,如果網(wǎng)絡(luò)很差的時(shí)候吭练,減少兩次請(qǐng)求就比較明顯了诫龙。

至于說(shuō)MP4文件在哪里調(diào)換moov的順序,可以在寫文件的時(shí)候鲫咽,也可以后臺(tái)服務(wù)器轉(zhuǎn)碼.
這部分的:參考代碼

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末签赃,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子分尸,更是在濱河造成了極大的恐慌锦聊,老刑警劉巖,帶你破解...
    沈念sama閱讀 211,948評(píng)論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件箩绍,死亡現(xiàn)場(chǎng)離奇詭異孔庭,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)伶选,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,371評(píng)論 3 385
  • 文/潘曉璐 我一進(jìn)店門史飞,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)尖昏,“玉大人仰税,你說(shuō)我怎么就攤上這事构资。” “怎么了陨簇?”我有些...
    開封第一講書人閱讀 157,490評(píng)論 0 348
  • 文/不壞的土叔 我叫張陵吐绵,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我河绽,道長(zhǎng)己单,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 56,521評(píng)論 1 284
  • 正文 為了忘掉前任耙饰,我火速辦了婚禮纹笼,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘苟跪。我一直安慰自己廷痘,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,627評(píng)論 6 386
  • 文/花漫 我一把揭開白布件已。 她就那樣靜靜地躺著笋额,像睡著了一般。 火紅的嫁衣襯著肌膚如雪篷扩。 梳的紋絲不亂的頭發(fā)上兄猩,一...
    開封第一講書人閱讀 49,842評(píng)論 1 290
  • 那天,我揣著相機(jī)與錄音鉴未,去河邊找鬼枢冤。 笑死,一個(gè)胖子當(dāng)著我的面吹牛铜秆,可吹牛的內(nèi)容都是我干的掏导。 我是一名探鬼主播,決...
    沈念sama閱讀 38,997評(píng)論 3 408
  • 文/蒼蘭香墨 我猛地睜開眼羽峰,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼趟咆!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起梅屉,我...
    開封第一講書人閱讀 37,741評(píng)論 0 268
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤值纱,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后坯汤,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體虐唠,經(jīng)...
    沈念sama閱讀 44,203評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,534評(píng)論 2 327
  • 正文 我和宋清朗相戀三年惰聂,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了疆偿。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片咱筛。...
    茶點(diǎn)故事閱讀 38,673評(píng)論 1 341
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖杆故,靈堂內(nèi)的尸體忽然破棺而出迅箩,到底是詐尸還是另有隱情,我是刑警寧澤处铛,帶...
    沈念sama閱讀 34,339評(píng)論 4 330
  • 正文 年R本政府宣布饲趋,位于F島的核電站,受9級(jí)特大地震影響撤蟆,放射性物質(zhì)發(fā)生泄漏奕塑。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,955評(píng)論 3 313
  • 文/蒙蒙 一家肯、第九天 我趴在偏房一處隱蔽的房頂上張望龄砰。 院中可真熱鬧,春花似錦讨衣、人聲如沸换棚。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,770評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)圃泡。三九已至,卻和暖如春愿险,著一層夾襖步出監(jiān)牢的瞬間颇蜡,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,000評(píng)論 1 266
  • 我被黑心中介騙來(lái)泰國(guó)打工辆亏, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留风秤,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 46,394評(píng)論 2 360
  • 正文 我出身青樓扮叨,卻偏偏與公主長(zhǎng)得像缤弦,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子彻磁,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,562評(píng)論 2 349

推薦閱讀更多精彩內(nèi)容