寫在前面

如果您對(duì)音視頻技術(shù)感興趣，可以訂閱我的專題:音視頻專輯
也可以關(guān)注我的簡(jiǎn)書賬戶： 張芳濤，我后期會(huì)發(fā)布更多的音視頻以及圖像處理方面的文章。

正文

加入音頻和視頻文件

有幾種加入媒體文件，它們?cè)诒砀裰忻枋觯?/p>

連接與shell命令

媒體文件連接的先決條件

在Windows上，我們可以使用帶有/B標(biāo)志的復(fù)制命令來指示二進(jìn)制模式，在文件之間必須是一個(gè)加號(hào)。連接N文件的復(fù)制命令的一般形式是:

copy /B file1+file2+...+fileN-1+fileN outputFile

例如，連接文件videoclip1。mpg和videoclip2。mpg到文件視頻。mpg，我們可以使用以下命令:

copy /B videoclip1.mpg+videoclip2.mpg video.mpg

在Linux、Unix和OS X上，我們可以在表單中使用cat命令:cat file1 files2 > file3，因此我們可以修改前面的例子:

cat videoclip1.mpg videoclip2.mpg > video.mpg

鏈接concat協(xié)議

另一種選擇是使用concat協(xié)議，先決條件類似于復(fù)制命令。例如，要使用該協(xié)議修改前面的示例，我們可以使用以下命令:

ffmpeg -i concat:"videoclip1.mpg|videoclip2.mpg" -c copy video.mpg

我的測(cè)試命令：

ffmpeg -i concat:"/Users/zhangfangtao/Desktop/test.mp4|/Users/zhangfangtao/Desktop/test2.mp4" -c copy /Users/zhangfangtao/Desktop/test3.mp4 

• 顯示效果：

生成了一個(gè)新的視頻，不過我感覺這個(gè)視頻和test1沒有什么差別。

連接concat過濾器

用于音頻和視頻拼接的特殊過濾器是在表中描述的concat過濾器:

適當(dāng)篩選結(jié)果的先決條件:

• 所有段必須從時(shí)間戳0開始。

• 相應(yīng)的流必須在所有段中使用相同的參數(shù)，特別是視頻大小。

• 建議是相同的幀速率，否則輸出將使用可變幀速率。
  Concat filter可以加入各種格式，有些例子是:

  ffmpeg -i input1.avi -i input2.avi -filter_complex concat output.avi 
  ffmpeg -i input1.avi -i input2.avi -filter_complex concat output.mp4
  ffmpeg -i input1.avi -i input2.mp4 -filter_complex concat output.webm
  ffmpeg -i input1.avi -i input2.mp4 -i input3.mkv -filter_complex ^ concat=n=3 output.flv
  ffmpeg -i input1.avi -i input2.avi -i input3.avi -i input4.avi ^ -filter_complex concat=n=4 output.mp4
  f -i 1.avi -vf movie=2.avi[a];[in][a]concat a.mp4
  

我的測(cè)試命令如下：

ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -i /Users/zhangfangtao/Desktop/test3.mp4 -filter_complex concat /Users/zhangfangtao/Desktop/test4.mp4

• 顯示效果：
  生成了一個(gè)視頻，里面包含前兩段的是視頻內(nèi)容，不過，有效時(shí)長(zhǎng)只是第一段視頻的長(zhǎng)度。后面有種無效的感覺。。。。

其他類型的拼接技術(shù)

• 音頻合并（多個(gè)流到1個(gè)多聲道流） - 在數(shù)字音頻一章中介紹
• 將幾個(gè)音頻文件混合到1 - 在數(shù)字音頻一章中有描述
• 多路復(fù)用 - 在“FFmpeg基本介紹”一章中介紹了媒體流的選擇
• overlay-在overlay-畫中畫章節(jié)里面有具體的描述。

移除掉logo

一些視頻包含公司標(biāo)志，通常位于左上角，常見示例是錄制電視節(jié)目。 FFmpeg包含2個(gè)特殊濾鏡以去除徽標(biāo)，而最終效果并不總是完美，不過在許多情況下這種移除logo的技術(shù)還是可以接受的。

delogo過濾器

例如，我們首先從下圖所示的800x600像素大小視頻的右上角移除一個(gè)標(biāo)志，我們通過顯示一個(gè)綠色矩形的顯示選項(xiàng)來估計(jì)logo的位置:

ffmpeg -i eagles.mpg -vf delogo=x=700:y=0:w=100:h=50:t=3:show=1 nologo.mpg

現(xiàn)在我們可以精確地指定位置和標(biāo)識(shí)的存在幾乎是不可見的:

ffmpeg -i eagles.mpg -vf delogo=x=730:y=0:w=70:h=46:t=1 nologo.mpg

我的測(cè)試命令如下（沒有t參數(shù)，我這邊不識(shí)別這個(gè)，報(bào)錯(cuò))：

ffmpeg -i /Users/zhangfangtao/Desktop/ornage.jpeg -vf "delogo=x=15:y=678:w=218:h=20:show=1" /Users/zhangfangtao/Desktop/ornage2.jpeg

• 顯示效果(有沒有看到一個(gè)綠色的框)：

  
  
  有沒有看到一個(gè)綠色的框

  ffmpeg -i /Users/zhangfangtao/Desktop/ornage.jpeg -vf "delogo=x=10:y=700:w=300:h=35" /Users/zhangfangtao/Desktop/ornage3.jpeg 
  

• 顯示效果(水印沒了)：

水印沒了.jpeg

抖動(dòng)視頻部分的固定

沒有三腳架或車輛拍攝的視頻的一些部分通常包括抖動(dòng) - 水平和垂直移動(dòng)的小變化，在某些情況下可以使用去抖濾波器進(jìn)行修正：

參數(shù)可以按順序進(jìn)入默認(rèn)順序或以任何順序指定名稱:

ffmpeg -i travel.avi -vf deshake fixed_travel.avi
ffmpeg -i travel.avi -vf deshake=contrast=160 fixed.avi
ffmpeg -i travel.avi -vf deshake=blocksize=4:filename=log.txt fixed.avi

我的測(cè)試命令：

ffmpeg -i /Users/zhangfangtao/Desktop/1527143197.mp4  -vf deshake /Users/zhangfangtao/Desktop/1527143198.mp4 
ffmpeg -i /Users/zhangfangtao/Desktop/1527143197.mp4  -vf deshake=contrast=160 /Users/zhangfangtao/Desktop/1527143199.mp4
ffmpeg -i /Users/zhangfangtao/Desktop/1527143197.mp4 -vf deshake=blocksize=4:filename=/Users/zhangfangtao/Desktop/log.txt /Users/zhangfangtao/Desktop/1527143200.mp4

• 顯示效果：其實(shí)，我并沒有看出來什么效果。。。可能我用手機(jī)拍的抖得太厲害了。。。
  第三條指令打印出來的txt信息截圖如下：

log.txt

將顏色框添加到視頻

使用drawbox，我們可以在矩形區(qū)域找到精確的坐標(biāo)，以在其中搜索運(yùn)動(dòng)矢量，它用于除霧過濾器。 其他用途包括各種圖表，方案等。

例如，要在SVGA大小的輸入上添加一個(gè)尺寸為600x400像素的黃色框，其大小為左側(cè)150像素和頂部0像素，我們可以使用以下命令：

ffmpeg -i ship.avi -vf drawbox=x=150:w=600:h=400:c=yellow ship1.avi

我的測(cè)試命令：

ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -vf drawbox=x=150:w=600:h=400:c=yellow /Users/zhangfangtao/Desktop/test3.mp4

• 顯示效果

檢測(cè)幀數(shù)

如果您需要知道有多少幀包含您的視頻文件，您可以使用以下命令：

ffmpeg -i input.mpg -f null /dev/null

顯示輸出的最后兩行是:

frame= 250 fps=0.0 q=0.0 Lsize= 0kB time=00:00:10.00 bitrate= 0.0kbits/s
video:16kB audio:0kB subtitle:0 global headers:0kB muxing overhead -100.000000%

幀數(shù)為250，表示視頻幀的總數(shù)，也可以從幀速率和持續(xù)時(shí)間計(jì)算，但結(jié)果并不總是準(zhǔn)確。

我的測(cè)試命如下：

ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -f null /dev/null

• 顯示效果如下：

檢測(cè)廣告，部分轉(zhuǎn)換或損壞的編碼

從電視，互聯(lián)網(wǎng)等錄制的較長(zhǎng)視頻可以包含帶有廣告，轉(zhuǎn)場(chǎng)，不完整幀和其他不需要內(nèi)容的短片。 如果此部分包含黑色框架，則可以使用表中描述的黑色檢測(cè)過濾器檢測(cè)它們。

參數(shù)的描述（所有的參數(shù)都是可選的）

例如，要從源mptestsrc中檢測(cè)黑幀，命令是(控制臺(tái)輸出如下):

ffmpeg -f lavfi -i mptestsrc -vf blackdetect -f sdl 'test'

我的測(cè)試命令：

ffmpeg -f lavfi -i mptestsrc -vf blackdetect -f sdl 'test'

*顯示效果：

用黑幀過濾器進(jìn)行檢測(cè)

檢測(cè)黑幀的另一個(gè)過濾器是表中描述的黑幀過濾器：

過濾器blackdetect和blackframe類似，但每個(gè)顯示不同的信息。 圖像上顯示使用與黑檢測(cè)濾鏡相同的視頻源的黑幀濾鏡輸出：

ffmpeg -f lavfi -i mptestsrc -vf blackframe -f sdl 'test'

我的測(cè)試命令如下：

ffmpeg -f lavfi -i mptestsrc -vf blackframe -f sdl 'test'

• 顯示效果：

只選擇指定的幀進(jìn)行輸出

特殊的多媒體過濾器可以選擇音頻并選擇視頻啟用，以精確指定哪些幀將保留，哪些從輸出中排除。

由于select表達(dá)式的默認(rèn)值為1，因此選擇過濾器使用的接下來的兩個(gè)示例會(huì)產(chǎn)生相同的結(jié)果 - 所有幀將被選擇為輸出（值如果是0將不會(huì)選擇任何內(nèi)容）：

ffmpeg -i input.avi -vf select output.avi
ffmpeg -i input.avi -vf select=1 output.avi

我的測(cè)試命令如下：

ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -vf select /Users/zhangfangtao/Desktop/test3.mp4 
ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -vf select=1 /Users/zhangfangtao/Desktop/test3.mp4 
ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -vf select=0 /Users/zhangfangtao/Desktop/test3.mp4

• 實(shí)現(xiàn)效果，前兩個(gè)命令生成的是和原來一樣的視頻，最后一個(gè)命令，只有音頻信息，沒有界面。

要選擇20到25秒的部分，我們可以使用以下命令:

ffmpeg -i input.avi -vf select="gte(t\,20)*lte(t\,25)" output.avi

我的測(cè)試命令如下：

ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -vf select="gte\(t\,20\)*lte\(t\,25\)" /Users/zhangfangtao/Desktop/test3.mp4

• 實(shí)現(xiàn)效果：
  時(shí)間的限制不是太準(zhǔn)確，，，還是從頭給我播放到了最后。。。

若要選擇幀內(nèi)僅為輸出，我們可以使用以下命令:

ffmpeg -i input.avi -vf select="eq(pict_type\,I)" output.avi

我的測(cè)試命令如下：

ffmpeg -i /Users/zhangfangtao/Desktop/test.mp4 -vf select="eq\(pict_type\,I\)" /Users/zhangfangtao/Desktop/test3.mp4

• 實(shí)現(xiàn)的結(jié)果：
  視頻長(zhǎng)短沒有變，但是視頻的大小幾乎減少了一半。而且視頻少了很多細(xì)節(jié)。

通過改變縱橫比來縮放輸入

調(diào)整和伸縮視頻章節(jié)描述了縮放視頻幀的縮放過濾器。 另一種方法是使用改變顯示寬高比DAR和樣本寬高比SAR的setdar和setsar濾波器，它們的關(guān)系用公式表示（關(guān)于寬高比的細(xì)節(jié)在詞匯表中）：

DAR = width/height * SAR

示例如何使用setdar和setsar過濾器:

ffplay -i input.avi -vf setdar=r=16/9
ffplay -i input.avi -vf setdar=16/9
ffplay -i input.avi -vf setsar=r=1.234
ffplay -i input.avi -vf setsar=1.234

我的測(cè)試命令如下：

ffplay -i /Users/zhangfangtao/Desktop/test.mp4 -vf setdar=r=16/9
ffplay -i /Users/zhangfangtao/Desktop/test.mp4 -vf setdar=16/9
ffplay -i /Users/zhangfangtao/Desktop/test.mp4 -vf setsar=r=1.234
ffplay -i /Users/zhangfangtao/Desktop/test.mp4 -vf setsar=1.234

• 顯示效果如下：

屏幕抓取

為了將顯示輸出記錄到視頻文件中，例如創(chuàng)建一個(gè)教程，我們可以使用安裝了UScreenCapture直接顯示源過濾器的dshow輸入設(shè)備，下面是下載地址。
http://www.umediaserver.net/bin/UScreenCapture.zip
為了抓取全屏內(nèi)容，我們可以使用以下命令:

ffmpeg -f dshow -i video="UScreenCapture" -t 60 screen.mp4

如果我們想抓取一個(gè)特定的屏幕區(qū)域。我們必須使用regedit Windows工具來修改某些注冊(cè)表項(xiàng)，相信信息在downloaded UScreenCapture.zip文件里面的README文件里面。

因?yàn)槲矣玫腗AC電腦，所以我的錄屏命令如下：

ffmpeg -f avfoundation -r 30  -i "1:0"  -t 20 /Users/zhangfangtao/Desktop/test2.mp4 

• 顯示效果如下：

視頻幀的詳細(xì)信息

為了顯示每個(gè)視頻幀的信息，我們可以使用表格中描述的showinfo過濾器:

例如，下一個(gè)命令會(huì)生成下面打印的信息，其中包括前三行：

ffmpeg -report -f lavfi -i testsrc -vf showinfo -t 10 showinfo.mpg

n:0 pts:0 pts_time:0 pos:-1 fmt:rgb24 sar:1/1 s:320x240 i:P iskey:1 type:I checksum:88C4D19A plane_checksum:[88C4D19A]
n:1 pts:1 pts_time:0.04 pos:-1 fmt:rgb24 sar:1/1 s:320x240 i:P iskey:1 type:I checksum:C4740AD1 plane_checksum:[C4740AD1]
n:2 pts:2 pts_time:0.08 pos:-1 fmt:rgb24 sar:1/1 s:320x240 i:P iskey:1 type:I checksum:B6DD3DEB plane_checksum:[B6DD3DEB]

我的測(cè)試命令如下：

ffmpeg -report -f lavfi -i testsrc -vf showinfo -t 10 /Users/zhangfangtao/Desktop/test.mp4

• 顯示效果：

音頻頻譜

為了使音頻頻譜可視化，我們可以使用表中描述的示波器濾波器：

例如，下面的圖片顯示了該命令創(chuàng)建的聲譜：

ffmpeg -i audio.mp3 -vf showspectrum audio_spectrum.mp4

我的測(cè)試命令如下：

ffmpeg -i /Users/zhangfangtao/Desktop/DYZDJ.mp3 -lavfi showspectrum /Users/zhangfangtao/Desktop/test3.mp4

• 效果圖

音頻波形可視化

來自音頻輸入的波形可以通過表格中描述的showwaves濾波器進(jìn)行可視化：

例如，要將music.mp3文件中的波形可視化為waves.mp4文件，我們可以使用以下命令：

ffmpeg -i music.mp3 -vf showwaves waves.mp4

我的測(cè)試命令：

ffmpeg -i /Users/zhangfangtao/Desktop/NWDSL.mp3  -lavfi showwaves /Users/zhangfangtao/Desktop/test3.mp4

• 顯示效果如圖：

語音合成

• 沒有Windows環(huán)境，下面的沒測(cè)試，不過AVFoundation做這個(gè)相當(dāng)簡(jiǎn)單，想了解AVFounadtion怎么實(shí)現(xiàn)的點(diǎn)擊這里

通過包含libflite外部庫，人聲可以與來自Flite（Festival Lite）（一種小型可嵌入TTS（文本到語音）引擎）的flite音頻源合成。 它由美國(guó)卡內(nèi)基梅隆大學(xué)CMU Speech Group開發(fā)。 Flite完全用C語言編寫，重新實(shí)現(xiàn)了音樂節(jié)體系結(jié)構(gòu)的核心部分，以實(shí)現(xiàn)為每個(gè)系統(tǒng)設(shè)計(jì)的聲音之間的兼容性。 愛丁堡大學(xué)的節(jié)日語音合成系統(tǒng)是構(gòu)建語音合成系統(tǒng)的框架。 有關(guān)Flite的更多詳細(xì)信息，請(qǐng)?jiān)L問http://www.speech.cs.cmu.edu/flite

由于flite庫增加了10 MB以上的ffmpeg.exe文件，因此它不在官方二進(jìn)制文件中，而Windows二進(jìn)制文件可以從http://ffmpeg.tv/flite.php下載（Linux和OS X用戶可以編譯它們）。 要顯示可用語音列表，我們可以使用以下命令：

ffmpeg -f lavfi -i flite=list_voices=1

要讓計(jì)算機(jī)使用女性聲音從Message.txt文件中讀取文本，該命令為：

ffplay -f lavfi -i flite=textfile=Message.txt:v=slt

例如，要將文字“Happy New Year to all”保存到wish.wav文件中，我們可以使用以下命令：

ffmpeg -f lavfi -i flite=text="Happy New Year to all":v=kal16 wish.wav

如果我們想減慢講話速度以獲得更好的聽力，我們可以使用以下命令：

ffmpeg -f lavfi -i flite=textfile=text.txt -af atempo=0.5 speech.mp3

一次將輸出保存為多種格式

雖然從第一章中解釋的命令語法可以清楚看出，但我們可以通過一個(gè)命令將處理結(jié)果保存為多種格式，例如我們可以將flite語音引擎的輸出保存為MP3，WAV和WMA 格式在一個(gè)命令中：

ffmpeg -f lavfi -i flite=textfile=speech.txt speech.mp3 speech.wav speech.wma

我們還可以結(jié)合音頻和視頻格式，如果我們從視頻輸入格式指定音頻格式，則只包含音頻流，下一個(gè)示例中的文件clip.mp3只包含音頻流：

ffmpeg -i clip.avi clip.flv clip.mov clip.mp3 clip.mp4 clip.webm

額外的媒體輸入到filtergraph