ffmpeg是一個多平臺多媒體處理工具,處理視頻和音頻的功能非常強大。目前在網(wǎng)上搜到的iOS上使用FFMPEG的資料都比較陳舊,而FFMPEG更新迭代比較快;且網(wǎng)上的講解不夠詳細,對于初次接觸FFMPEG的新手(例如我)來說確實不太好使用。為了防止忘記,這里對iOS下使用FFMPEG做一個總結(jié)。
1. FFMPEG層次結(jié)構(gòu)的簡單理解
要使用FFMPEG,首先需要理解FFMPEG的代碼結(jié)構(gòu)。根據(jù)志哥的提示,ffmpeg的代碼是包括兩部分的,一部分是library,一部分是
tool。api都是在library里面,如果直接調(diào)api來操作視頻的話,就需要寫c或者c++了。另一部分是tool,使用的是命令行,則不需要自
己去編碼來實現(xiàn)視頻操作的流程。實際上tool只不過把命令行轉(zhuǎn)換為api的操作而已。
2. 預熱-在mac os下使用ffmpeg
在mac
os下使用ffmpeg比較簡單,可以直接使用命令行來操作。首先安裝ffmpeg,這里默認系統(tǒng)已經(jīng)安裝好brew,只需要在終端上輸入:
brew install ffmpeg
等待安裝結(jié)束即可。
安裝結(jié)束后,嘗試以下命令:
ffmpeg -i input.mp4 output.avi
如果能順利轉(zhuǎn)換,表明安裝成功
3. 編譯能在iOS下使用的FFMPEG library庫
這一步是編譯1所說的library,編譯好之后可以調(diào)用FFMPEG的api。網(wǎng)上有一些方法,但都要自己手動編譯,稍顯復雜而且比較陳舊。按照app
store的需求,編譯出來的包還必須支持arm64。我在萬能的github中找到一個能夠"一鍵編譯"的腳本,地址如下:
https://github.com/kewlbear/FFmpeg-iOS-build-script?
而且寫這個腳本的歪果仁挺好人,更新很及時,已經(jīng)更新到了最新的2.5.3版本。下載下來,只有一個build-ffmpeg.sh腳本文件。在終端中轉(zhuǎn)至腳本的目錄,執(zhí)行命令:
./build-ffmpeg.sh
腳本則會自動從github中把ffmpeg源碼下到本地并開始編譯。
編譯結(jié)束后,文件目錄如下:
其中,ffmpeg-2.5.3是源碼,F(xiàn)Fmpeg-iOS是編譯出來的庫,里面有我們需要的.a靜態(tài)庫,一共有7個。
執(zhí)行命令:
lipo -info libavcodec.a
查看.a包支持的架構(gòu),這幾個包都支持了armv7 armv7s i386 x86_64
arm64這幾個架構(gòu),這個腳本果真是業(yè)界良心啊~~~
4.在xcode中引入FFMPEG library庫
新建工程,把上面編譯好的FFmpeg-iOS拖到xcode工程中,添加一個頭文件引用
#include "avformat.h"
添加一個api語句:
av_register_all();
添加一個空的類,把執(zhí)行文件.m后綴改為.mm,開啟混編模式。
添加相應的framework,包括avfoundation和coremedia。
運行工程,如果沒有報錯,則表明編譯成功。
5.在xcode項目中使用命令行
執(zhí)行到第4步,已經(jīng)可以使用library庫了。但是如果要對視頻進行操作,還是需要手動寫很多代碼去調(diào)用api,工作量較大,自然不如直接寫命令行方便。為了命令行能夠在xcode工程中使用,還需要做以下工作:
(1)添加源碼中的tools,具體文件包括:
(2)添加Header Search Paths
在target--build setting中搜索Header Search Paths,并在Header Search
Paths下面添加源碼ffmpeg-2.5.3和scratch的路徑。
(3)修改ffmpeg.h和ffmpeg.c源碼
如果此時run這個工程,則會報錯,原因是工程里面有2個main函數(shù),此時處理方法為:
在ffmpeg.h中添加一個函數(shù)聲明:
int ffmpeg_main(int argc, char **argv);
在ffmpeg.c中找到main函數(shù),把main函數(shù)改為ffmpeg_main。
(4)調(diào)用命令行范例
添加頭文件:#import "ffmpeg.h"
調(diào)用命令行
intnumberOfArgs = 16;
char** arguments =calloc(numberOfArgs, sizeof(char*));
arguments[0] = "ffmpeg";
arguments[1] = "-i";
arguments[2] = inputPath;
arguments[3] = "-ss";
arguments[4] = "0";
arguments[5] = "-t";
arguments[6] =durationChar;
arguments[7] = "-vcodec";
arguments[8] = "copy";
arguments[9] = "-acodec";
arguments[10] = "aac";
arguments[11] ="-strict";
arguments[12] = "-2";
arguments[13] = "-b:a";
arguments[14] = "32k";
arguments[15] =outputPath;
int result =ffmpeg_main(numberOfArgs, arguments);
其中inputpath和outputpath是文件路徑。經(jīng)測試,這兩個路徑不支持asset-library://協(xié)議和file://
協(xié)議,所以如果是要用相冊的文件,我目前的解決辦法是把它拷貝到沙盒里面。
6. 改關(guān)閉進程為關(guān)閉線程
如果順利進行到了第5步,在app中是能夠用命令行處理視頻了,但會出現(xiàn)一個問題,app會退出。經(jīng)肖大神提醒,發(fā)現(xiàn)了命令行執(zhí)行完畢之后會退出進程。而iOS下只能啟動一個進程,因此必須改關(guān)閉進程為關(guān)閉線程,或者直接把關(guān)閉進程的方法給注掉。
在ffmpeg.c中可以看到,執(zhí)行退出進程的方法是exit_program,定位到了cmdutils.c中執(zhí)行了c語言的exit方法。這里我將它改為了pthread_exit(需要添加#include頭文件)。在xcode項目中使用時,則可以用NSThread來新開一個線程,執(zhí)行完畢之后,把線程關(guān)閉了即可。再使用NSThreadWillExitNotification通知,即可監(jiān)聽線程退出的情況。
7. 修復ffmpeg.c里面的一個bug
在實際項目中,可能需要多次調(diào)用命令行,但在多次調(diào)用命令行的過程中,發(fā)現(xiàn)ffmpeg.c的代碼中會訪問空屬性導致程序崩潰。逐步debug后發(fā)現(xiàn),很
多指針已經(jīng)置空了,但它們的計數(shù)卻沒有置零,不知道是不是ffmpeg.c的一個bug。修復方法如下:在ffmpeg_cleanup方法下,將各個計
數(shù)器置零,包括:
nb_filtergraphs
nb_output_files
nb_output_streams
nb_input_files
nb_input_streams
置零之后,重復使用ffmpeg_main方法一切正常。
以上是近期研究ffmpeg的一些小結(jié),目前對于ffmpeg還是處于剛認識階段,對于其api的使用、命令行的具體參數(shù)等,都還需要繼續(xù)研究和學習。