MP4分析

MP4文件分析
概述
MP4文件中的所有數(shù)據(jù)都裝在box(QuickTime中為atom)中,也就是說(shuō)MP4文件由若干個(gè)box組成,每個(gè)box有類型和長(zhǎng)度,可以將box理解為一個(gè)數(shù)據(jù)對(duì)象塊。box中可以包含另一個(gè)box,這種box稱為container box。

  • 一個(gè)MP4文件首先會(huì)有且只有一個(gè)“ftyp”類型的box,作為MP4格式的標(biāo)志并包含關(guān)于文件的一些信息;

  • 之后會(huì)有且只有一個(gè)“moov”類型的box(Movie Box),它是一種container box,子box包含了媒體的metadata信息;

  • MP4文件的媒體數(shù)據(jù)包含在“mdat”類型的box(Midia Data Box)中,該類型的box也是container box,可以有多個(gè),也可以沒有(當(dāng)媒體數(shù)據(jù)全部引用其他文件時(shí)),媒體數(shù)據(jù)的結(jié)構(gòu)由metadata進(jìn)行描述。

mp4.jpg

文件結(jié)構(gòu)
整個(gè)文件由Box組成,所有的數(shù)據(jù)都在Box內(nèi)定義。Box可以層級(jí)嵌套,例如,moov可以包含多個(gè)trak。

aligned(8) class Box (unsigned int(32) boxtype, optional unsigned int(8)[16] extended_type)   
{  
  unsigned int(32) size;  
  unsigned int(32) type = boxtype;  
  if (size==1)   
   {  
    unsigned int(64) largesize;  
   }   
   else if (size==0)   
   {  
     // box extends to end of file  
   }  
   if (boxtype==‘uuid’) {  
      unsigned int(8)[16] usertype = extended_type;  
   }  
}  

note: 就是說(shuō)一般情況下Box是以8個(gè)字節(jié)開頭,接著就是Box的數(shù)據(jù)。這個(gè)8個(gè)字節(jié)分別表示size和type。size是整個(gè)Box的字節(jié)數(shù),含size和type本身。type是4個(gè)可讀的字符。例如:File Type Box的type就ftyp。 標(biāo)準(zhǔn)的type都是4個(gè)字符,如果要自定義的type,則需要把type設(shè)為"uuid",然后再附上16個(gè)字符作為自定義type.
參考代碼


以一個(gè)長(zhǎng)度為10秒的MP4為例,其結(jié)構(gòu)可能如下:
type: ftyp, size: 24
type: mdat, size: 8884701
type: mdat, size: 136125
type: moov, size: 4656

  1. ftyp
    一個(gè)ftyp對(duì)文件的類型進(jìn)行描述,指明其符合哪些格式。一般就是mp4格式了。符合本文檔的媒體類型有很多種,box條目的種類也不同,所以需要brand與compatible_brands的來(lái)說(shuō)明此文件內(nèi)的box的種類。文檔中定義了isom, avc1, iso2, mp71, iso3這些brand應(yīng)有的格式,當(dāng)解碼器在讀出其brand后,就知道該文件的格式了。

aligned(8) class FileTypeBox extends Box(‘ftyp’) {  
  unsigned int(32) major_brand;  
  unsigned int(32) minor_version;  
  unsigned int(32) compatible_brands[]; // to end of the box  
}  
  1. mdat

上例中有2個(gè)mdat,一個(gè)是視頻內(nèi)容、另一個(gè)音頻內(nèi)容。對(duì)于h264, aac編碼的媒體來(lái)說(shuō),其視頻mdat中內(nèi)容是nal,對(duì)于音頻來(lái)說(shuō),其內(nèi)容為aac的一幀。mdat中的幀依次存放,每個(gè)幀的位置、時(shí)間、長(zhǎng)度都由moov中的信息指定。可以看出,mdat是很好組建的,這種Box只含有數(shù)據(jù)。


aligned(8) class MediaDataBox extends Box(‘mdat’) {  
   bit(8) data[];  
}  
  1. moov

moov存放影片的所有信息,一個(gè)moov含有多個(gè)trak。通常對(duì)于一個(gè)片子來(lái)說(shuō),就是一個(gè)視頻trak,一個(gè)音頻trak。MP4文件的重點(diǎn)也在于此。



(1) trak / tkhd
對(duì)于視頻trak,存寬、高信息;對(duì)于音頻trak,存音量信息。并不是太重要,真正初始化解碼器要靠 stsd中的信息。
(2) trak / mdia / hdlr
標(biāo)明該trak是視頻還是音頻
(3) trak / mdia / minf / stbl
所有重要的表都在這里。其中,

  • stsd: 編碼器CODEC信息
  • stsz: 用于sample的劃分,通常一個(gè)sample可以對(duì)應(yīng)于frame。
  • stsc: 多個(gè)sample組成一個(gè)trunk,不過(guò)實(shí)際操作中可以讓一個(gè)sample直接構(gòu)成一個(gè)trunk
  • stco: trunk在文件中的位置,用于定位。
  • stts / ctts: 指定每個(gè)sample的PTS, DTS
    (4) trak / edts / elst
    把視頻分為多段segment, 每個(gè)的起始時(shí)間和時(shí)長(zhǎng)。

MP4快速拉流
參考鏈接: Optimizing MP4 Video for Fast Streaming

看這段

You can see the browser makes 3 requests before it can start playing the video. In the first request, the browser downloads the first 552 KB of the video using an [HTTP range request](https://en.wikipedia.org/wiki/Byte_serving). We can tell this by the 206 Partial Content HTTP response code, and by digging in and looking at the request headers. However the moov
 atom is not there so the browser cannot start to play the video. Next, the browser requests the final 21 KB of the video file using another range request. This does contain the moov
 atom, telling the browser where the video and audio streams start. Finally, the browser makes a third and final request to get the audio/video data and can start to play the video. This has wasted over half a megabyte of bandwidth and delayed the start of the video by 210 ms! Simply because the browser couldn’t find the moov
 atom.

如果將moov放到最前面,可以減少兩次請(qǐng)求,moov最重要的信息包括:stsd: 編碼器CODEC信息,(音視頻類型,寬高等),所以說(shuō),放在前面的話,如果網(wǎng)絡(luò)很差的時(shí)候,減少兩次請(qǐng)求就比較明顯了。

至于說(shuō)MP4文件在哪里調(diào)換moov的順序,可以在寫文件的時(shí)候,也可以后臺(tái)服務(wù)器轉(zhuǎn)碼.
這部分的:參考代碼

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,197評(píng)論 6 531
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 98,415評(píng)論 3 415
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人,你說(shuō)我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 176,104評(píng)論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)。 經(jīng)常有香客問我,道長(zhǎng),這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,884評(píng)論 1 309
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 71,647評(píng)論 6 408
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 55,130評(píng)論 1 323
  • 那天,我揣著相機(jī)與錄音,去河邊找鬼。 笑死,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,208評(píng)論 3 441
  • 文/蒼蘭香墨 我猛地睜開眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 42,366評(píng)論 0 288
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 48,887評(píng)論 1 334
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 40,737評(píng)論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 42,939評(píng)論 1 369
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,478評(píng)論 5 358
  • 正文 年R本政府宣布,位于F島的核電站,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 44,174評(píng)論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,586評(píng)論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,827評(píng)論 1 283
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 51,608評(píng)論 3 390
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 47,914評(píng)論 2 372

推薦閱讀更多精彩內(nèi)容