ffmpeg是一個(gè)多平臺(tái)多媒體處理工具,處理視頻和音頻的功能非常強(qiáng)大。目前在網(wǎng)上搜到的iOS上使用FFMPEG的資料都比較陳舊,而FFMPEG更新迭代比較快;且網(wǎng)上的講解不夠詳細(xì),對(duì)于初次接觸FFMPEG的新手(例如我)來(lái)說(shuō)確實(shí)不太好使用。為了防止忘記,這里對(duì)iOS下使用FFMPEG做一個(gè)總結(jié)。
1. FFMPEG層次結(jié)構(gòu)的簡(jiǎn)單理解
要使用FFMPEG,首先需要理解FFMPEG的代碼結(jié)構(gòu)。根據(jù)志哥的提示,ffmpeg的代碼是包括兩部分的,一部分是library,一部分是
tool。api都是在library里面,如果直接調(diào)api來(lái)操作視頻的話,就需要寫(xiě)c或者c++了。另一部分是tool,使用的是命令行,則不需要自
己去編碼來(lái)實(shí)現(xiàn)視頻操作的流程。實(shí)際上tool只不過(guò)把命令行轉(zhuǎn)換為api的操作而已。
2. 預(yù)熱-在mac os下使用ffmpeg
在mac
os下使用ffmpeg比較簡(jiǎn)單,可以直接使用命令行來(lái)操作。首先安裝ffmpeg,這里默認(rèn)系統(tǒng)已經(jīng)安裝好brew,只需要在終端上輸入:
brew install ffmpeg
等待安裝結(jié)束即可。
安裝結(jié)束后,嘗試以下命令:
ffmpeg -i input.mp4 output.avi
如果能順利轉(zhuǎn)換,表明安裝成功
3. 編譯能在iOS下使用的FFMPEG library庫(kù)
這一步是編譯1所說(shuō)的library,編譯好之后可以調(diào)用FFMPEG的api。網(wǎng)上有一些方法,但都要自己手動(dòng)編譯,稍顯復(fù)雜而且比較陳舊。按照app
store的需求,編譯出來(lái)的包還必須支持arm64。我在萬(wàn)能的github中找到一個(gè)能夠"一鍵編譯"的腳本,地址如下:
https://github.com/kewlbear/FFmpeg-iOS-build-script?
而且寫(xiě)這個(gè)腳本的歪果仁挺好人,更新很及時(shí),已經(jīng)更新到了最新的2.5.3版本。下載下來(lái),只有一個(gè)build-ffmpeg.sh腳本文件。在終端中轉(zhuǎn)至腳本的目錄,執(zhí)行命令:
./build-ffmpeg.sh
腳本則會(huì)自動(dòng)從github中把ffmpeg源碼下到本地并開(kāi)始編譯。
編譯結(jié)束后,文件目錄如下:
其中,ffmpeg-2.5.3是源碼,F(xiàn)Fmpeg-iOS是編譯出來(lái)的庫(kù),里面有我們需要的.a靜態(tài)庫(kù),一共有7個(gè)。
執(zhí)行命令:
lipo -info libavcodec.a
查看.a包支持的架構(gòu),這幾個(gè)包都支持了armv7 armv7s i386 x86_64
arm64這幾個(gè)架構(gòu),這個(gè)腳本果真是業(yè)界良心啊~~~
4.在xcode中引入FFMPEG library庫(kù)
新建工程,把上面編譯好的FFmpeg-iOS拖到xcode工程中,添加一個(gè)頭文件引用
#include "avformat.h"
添加一個(gè)api語(yǔ)句:
av_register_all();
添加一個(gè)空的類,把執(zhí)行文件.m后綴改為.mm,開(kāi)啟混編模式。
添加相應(yīng)的framework,包括avfoundation和coremedia。
運(yùn)行工程,如果沒(méi)有報(bào)錯(cuò),則表明編譯成功。
5.在xcode項(xiàng)目中使用命令行
執(zhí)行到第4步,已經(jīng)可以使用library庫(kù)了。但是如果要對(duì)視頻進(jìn)行操作,還是需要手動(dòng)寫(xiě)很多代碼去調(diào)用api,工作量較大,自然不如直接寫(xiě)命令行方便。為了命令行能夠在xcode工程中使用,還需要做以下工作:
(1)添加源碼中的tools,具體文件包括:
(2)添加Header Search Paths
在target--build setting中搜索Header Search Paths,并在Header Search
Paths下面添加源碼ffmpeg-2.5.3和scratch的路徑。
(3)修改ffmpeg.h和ffmpeg.c源碼
如果此時(shí)run這個(gè)工程,則會(huì)報(bào)錯(cuò),原因是工程里面有2個(gè)main函數(shù),此時(shí)處理方法為:
在ffmpeg.h中添加一個(gè)函數(shù)聲明:
int ffmpeg_main(int argc, char **argv);
在ffmpeg.c中找到main函數(shù),把main函數(shù)改為ffmpeg_main。
(4)調(diào)用命令行范例
添加頭文件:#import "ffmpeg.h"
調(diào)用命令行
intnumberOfArgs = 16;
char** arguments =calloc(numberOfArgs, sizeof(char*));
arguments[0] = "ffmpeg";
arguments[1] = "-i";
arguments[2] = inputPath;
arguments[3] = "-ss";
arguments[4] = "0";
arguments[5] = "-t";
arguments[6] =durationChar;
arguments[7] = "-vcodec";
arguments[8] = "copy";
arguments[9] = "-acodec";
arguments[10] = "aac";
arguments[11] ="-strict";
arguments[12] = "-2";
arguments[13] = "-b:a";
arguments[14] = "32k";
arguments[15] =outputPath;
int result =ffmpeg_main(numberOfArgs, arguments);
其中inputpath和outputpath是文件路徑。經(jīng)測(cè)試,這兩個(gè)路徑不支持asset-library://協(xié)議和file://
協(xié)議,所以如果是要用相冊(cè)的文件,我目前的解決辦法是把它拷貝到沙盒里面。
6. 改關(guān)閉進(jìn)程為關(guān)閉線程
如果順利進(jìn)行到了第5步,在app中是能夠用命令行處理視頻了,但會(huì)出現(xiàn)一個(gè)問(wèn)題,app會(huì)退出。經(jīng)肖大神提醒,發(fā)現(xiàn)了命令行執(zhí)行完畢之后會(huì)退出進(jìn)程。而iOS下只能啟動(dòng)一個(gè)進(jìn)程,因此必須改關(guān)閉進(jìn)程為關(guān)閉線程,或者直接把關(guān)閉進(jìn)程的方法給注掉。
在ffmpeg.c中可以看到,執(zhí)行退出進(jìn)程的方法是exit_program,定位到了cmdutils.c中執(zhí)行了c語(yǔ)言的exit方法。這里我將它改為了pthread_exit(需要添加#include頭文件)。在xcode項(xiàng)目中使用時(shí),則可以用NSThread來(lái)新開(kāi)一個(gè)線程,執(zhí)行完畢之后,把線程關(guān)閉了即可。再使用NSThreadWillExitNotification通知,即可監(jiān)聽(tīng)線程退出的情況。
7. 修復(fù)ffmpeg.c里面的一個(gè)bug
在實(shí)際項(xiàng)目中,可能需要多次調(diào)用命令行,但在多次調(diào)用命令行的過(guò)程中,發(fā)現(xiàn)ffmpeg.c的代碼中會(huì)訪問(wèn)空屬性導(dǎo)致程序崩潰。逐步debug后發(fā)現(xiàn),很
多指針已經(jīng)置空了,但它們的計(jì)數(shù)卻沒(méi)有置零,不知道是不是ffmpeg.c的一個(gè)bug。修復(fù)方法如下:在ffmpeg_cleanup方法下,將各個(gè)計(jì)
數(shù)器置零,包括:
nb_filtergraphs
nb_output_files
nb_output_streams
nb_input_files
nb_input_streams
置零之后,重復(fù)使用ffmpeg_main方法一切正常。
以上是近期研究ffmpeg的一些小結(jié),目前對(duì)于ffmpeg還是處于剛認(rèn)識(shí)階段,對(duì)于其api的使用、命令行的具體參數(shù)等,都還需要繼續(xù)研究和學(xué)習(xí)。