Ⅰ ffmpeg 基本用法
1、libavformat：用於各種音視頻封裝格式的生成和解析，包括獲取解碼所需信息以生成解碼上下文結構和讀取音視頻幀等功能，包含demuxers和muxer庫；
2、libavcodec：用於各種類型聲音/圖像編解碼；
3、libavutil：包含一些公共的工具函數；
4、libswscale：用於視頻場景比例縮放、色彩映射轉換；
5、libpostproc：用於後期效果處理；
6、ffmpeg：是一個命令行工具，用來對視頻文件轉換格式，也支持對電視卡實時編碼；
7、ffsever：是一個HTTP多媒體實時廣播流伺服器，支持時光平移；
8、ffplay：是一個簡單的播放器，使用ffmpeg 庫解析和解碼，通過SDL顯示；
在這組成部分中，需要熟悉基礎概念有
容器(Container)
容器就是一種文件格式，比如flv，mkv等。包含下面5種流以及文件頭信息。
流(Stream)
是一種視頻數據信息的傳輸方式，5種流：音頻，視頻，字幕，附件，數據。
幀(Frame)
幀代表一幅靜止的圖像，分為I幀，P幀，B幀。
編解碼器(Codec)
是對視頻進行壓縮或者解壓縮，CODEC =COde （編碼） +DECode（解碼）
復用/解復用(mux/demux)
把不同的流按照某種容器的規則放入容器，這種行為叫做復用（mux）
把不同的流從某種容器中解析出來，這種行為叫做解復用(demux)
1、FFmpeg程序把-i參數指定的若干文件內容讀入到內存，按照輸入的參數或者程序默認的參數來處理並且把結果寫入到若乾的文件中。輸入和輸出文件可以是計算機文件、管道、網路流、捕獲設備等。
2、FFmpeg用libavformat包調用解復用器（demuxers）來讀取輸入文件中被編碼的數據包(packets)，如果有多個輸入文件，FFmpeg以有效輸入流的最小時間戳來同步，
3、然後解碼器（decoder）從已編碼的數據包中產生未被壓縮的幀（frame），在那之後調用可選的過濾器。
4、這些幀被傳遞到編碼器，編碼器會產生新的編碼包
5、把新的編碼包傳遞給復用器(muxer)處理並且把結果寫入到輸出文件中。
在多媒體處理中，filter的意思是被編碼到輸出文件之前用來修改輸入文件內容的一個軟體工具。如：視頻翻轉，旋轉，縮放等。
語法：[input_link_label1]… filter_name=parameters [output_link_label1]…
1、視頻過濾器 -vf
如input.mp4視頻按順時針方向旋轉90度
ffplay -i input.mp4 -vf transpose=1
如input.mp4視頻水平翻轉(左右翻轉)
ffplay -i input.mp4 -vf hflip
2、音頻過濾器 -af
實現慢速播放，聲音速度是原始速度的50%
offplay input.mp3 -af atempo=0.5
過濾器鏈（Filterchain）
Filterchain = 逗號分隔的一組filter
語法：「filter1,filter2,filter3,…filterN-2,filterN-1,filterN」
順時針旋轉90度並水平翻轉
ffplay -i input.mp4 -vf transpose=1,hflip
過濾器圖(Filtergraph)
第一步： 源視頻寬度擴大兩倍。
ffmpeg -i ji.mp4 -t 10 -vf pad=2*iw output.mp4
第二步：源視頻水平翻轉
ffmpeg -i ji.mp4 -t 10 -vf hflip output2.mp4
第三步：水平翻轉視頻覆蓋output.mp4
ffmpeg -i output.mp4 -i output2.mp4 -filter_complex overlay=w compare.mp4
是不是很復雜？
用帶有鏈接標記的過濾器圖(Filtergraph)只需一條命令
基本語法
Filtergraph = 分號分隔的一組filterchain
「filterchain1;filterchain2;…filterchainN-1;filterchainN」
Filtergraph的分類
1、簡單(simple) 一對一
2、復雜(complex）多對一， 多對多
簡單過濾器圖處理流程：
復雜過濾器圖處理流程：
對於剛才用三步處理的方式，用過濾器圖可以這樣做：
ffplay -f lavfi -i testsrc -vf split[a][b];[a]pad=2*iw[1];[b]hflip[2];[1][2]overlay=w
F1: split過濾器創建兩個輸入文件的拷貝並標記為[a],[b]
F2: [a]作為pad過濾器的輸入，pad過濾器產生2倍寬度並輸出到[1].
F3: [b]作為hflip過濾器的輸入，vflip過濾器水平翻轉視頻並輸出到[2].
F4: 用overlay過濾器把 [2]覆蓋到[1]的旁邊.
一些多媒體容器比如AVI，mkv，mp4等，可以包含不同種類的多個流，如何從容器中抽取各種流呢？
語法：
-map file_number[:stream_type][:stream_number]
這有一些特別流符號的說明：
1、-map 0 選擇第一個文件的所有流
2、-map i:v 從文件序號i(index)中獲取所有視頻流， -map i:a 獲取所有音頻流，-map i:s 獲取所有字幕流等等。
3、特殊參數-an,-vn,-sn分別排除所有的音頻，視頻，字幕流
tip：對比上面的圖，可以知道，假設有兩個文件ffmpeg -i fist.mp4 -i second.mp4 ..output.mp4
如果想去兩個文件的音視頻流 ffmpeg -i fist.mp4 -i second.mp4 map:0 -map 1 output.mp4
如果想去第一個文件的視頻流，第二個文件的音頻流ffmpeg -i fist.mp4 -i second.mp4 -map:v:0 -map:a:0 output.mp4
可用的bit流 ：ffmpeg –bsfs
可用的編解碼器：ffmpeg –codecs
可用的解碼器：ffmpeg –decoders
可用的編碼器：ffmpeg –encoders
可用的過濾器：ffmpeg –filters
可用的視頻格式：ffmpeg –formats
可用的聲道布局：ffmpeg –layouts
可用的license：ffmpeg –L
可用的像素格式：ffmpeg –pix_fmts
可用的協議：ffmpeg -protocals
碼率和幀率是視頻文件的最重要的基本特徵，對於他們的特有設置會決定視頻質量。如果我們知道碼率和時長那麼可以很容易計算出輸出文件的大小。
幀率：幀率也叫幀頻率，幀率是視頻文件中每一秒的幀數，肉眼想看到連續移動圖像至少需要15幀。
碼率：比特率(也叫碼率，數據率)是一個確定整體視頻/音頻質量的參數，秒為單位處理的位元組數，碼率和視頻質量成正比，在視頻文件中中比特率用bps來表達。
設置幀率
1、用 -r 參數設置幀率
ffmpeg –i input.mp4 –r fps output.mp4
2、用fps filter設置幀率
ffmpeg -i clip.mpg -vf fps=fps=25 clip.webm
設置碼率 –b 參數
-b
ffmpeg -i film.avi -b 1.5M film.mp4
音頻：-b:a 視頻： - b:v
設置視頻碼率為1500kbps
ffmpeg -i input.avi -b:v 1500k output.mp4
控制輸出文件大小
-fs (file size首字母縮寫)
ffmpeg -i input.avi -fs 1024K output.mp4
計算輸出文件大小
(視頻碼率+音頻碼率) * 時長 /8 = 文件大小K
用-s參數設置視頻解析度，參數值wxh，w寬度單位是像素，h高度單位是像素
ffmpeg -i input_file -s 320x240 output_file
2、預定義的視頻尺寸
下面兩條命令有相同效果
ffmpeg -i input.avi -s 640x480 output.avi
ffmpeg -i input.avi -s vga output.avi
下表列出了所有的預定義尺寸
Scale filter調整解析度
Scale filter的優點是可以使用一些額外的參數
語法：
Scale=width:height[:interl={1|-1}]
下表列出了常用的額外參數
下面兩條命令有相同效果
ffmpeg -i input.mpg -s 320x240 output.mp4
ffmpeg -i input.mpg -vf scale=320:240 output.mp4
對輸入視頻成比例縮放
改變為源視頻一半大小
ffmpeg -i input.mpg -vf scale=iw/2:ih/2 output.mp4
改變為原視頻的90%大小：
ffmpeg -i input.mpg -vf scale=iw 0.9:ih 0.9 output.mp4
在未知視頻的解析度時，保證調整的解析度與源視頻有相同的橫縱比。
寬度固定400，高度成比例：
ffmpeg -i input.avi -vf scale=400:400/a
ffmpeg -i input.avi -vf scale=400:-1
相反地，高度固定300，寬度成比例：
ffmpeg -i input.avi -vf scale=-1:300
ffmpeg -i input.avi -vf scale=300*a:300
從輸入文件中選取你想要的矩形區域到輸出文件中,常見用來去視頻黑邊。
語法：crop:ow[:oh[:x[:y:[:keep_aspect]]]]
裁剪輸入視頻的左三分之一，中間三分之一，右三分之一:
ffmpeg -i input -vf crop=iw/3:ih :0:0 output
ffmpeg -i input -vf crop=iw/3:ih :iw/3:0 output
ffmpeg -i input -vf crop=iw/3:ih :iw/3*2:0 output
裁剪幀的中心
當我們想裁剪區域在幀的中間時，裁剪filter可以跳過輸入x和y值，他們的默認值是
Xdefault = ( input width - output width)/2
Ydefault = ( input height - output height)/2
ffmpeg -i input_file -v crop=w:h output_file
裁剪中間一半區域：
ffmpeg -i input.avi -vf crop=iw/2:ih/2 output.avi
比較裁剪後的視頻和源視頻比較
ffplay -i ji.mp4 -vf split[a][b];[a]drawbox=x=(iw-300)/2:(ih-300)/2:w=300:h=300:c=yellow[A];[A]pad=2 iw[C];[b]crop=300:300:(iw-300)/2:(ih-300)/2[B];[C][B]overlay=w 2.4:40
自動檢測裁剪區域�
cropdetect filter 自動檢測黑邊區域
ffplay ji.mp4 -vf cropdetect
填充視頻(pad)
在視頻幀上增加一快額外額區域，經常用在播放的時候顯示不同的橫縱比
語法：pad=width[:height:[:x[:y:[:color]]]]
創建一個30個像素的粉色寬度來包圍一個SVGA尺寸的圖片：
ffmpeg -i photo.jpg -vf pad=860:660:30:30:pink framed_photo.jpg
同理可以製作input.mp4視頻用30個像素粉色包圍視頻
ffplay -i input.mp4 -vf pad=iw+60:ih+60:30:30:pink
4:3到16:9
一些設備只能播放16:9的橫縱比，4:3的橫縱比必須在水平方向的兩邊填充成16:9，
高度被保持，寬度等於高度乘以16/9，x（輸入文件水平位移）值由表達式(output_width - input_width)/2來計算。
4：3到16:9的通用命令是：
ffmpeg -i input.mp4 -vf pad=ih 16/9:ih :(ow-iw)/2:0:color output.mp4
eg:ffplay -f input.mp4 -vf pad=ih 16/9:ih:(ow-iw)/2:0:pink
16:9到4:3
為了用4:3的橫縱比來顯示16:9的橫縱比，填充輸入文件的垂直兩邊，寬度保持不變，高度是寬度的3/4，y值（輸入文件的垂直偏移量）是由一個表達式（output_height-input_height）/2計算出來的。
16:9到4:3的通用命令：
ffmpeg -i input.mp4-vf pad=iw :iw 3/4:0:(oh-ih)/2:color output.mp4
eg:ffplay -i input.mp4 =size=320x180 -vf pad=iw:iw 3/4:0:(oh-ih)/2:pink
水平翻轉語法: -vf hflip
ffplay -f lavfi -i testsrc -vf hflip
垂直翻轉語法：-vf vflip
ffplay -f lavfi -i testsrc -vf vflip
語法：transpose={0,1,2,3}
0:逆時針旋轉90°然後垂直翻轉
1:順時針旋轉90°
2:逆時針旋轉90°
3:順時針旋轉90°然後水平翻轉
模糊
語法：boxblur=luma_r:luma_p[:chroma_r:chram_p[:alpha_r:alpha_p]]
ffplay -f lavfi -i testsrc -vf boxblur=1:10:4:10
注意：luma_r和alpha_r半徑取值范圍是0~min(w,h)/2, chroma_r半徑的取值范圍是0~min(cw/ch)/2
銳化
語法：-vf unsharp=l_msize_x:l_msize_y:l_amount:c_msize_x:c_msize_y:c_amount
所有的參數是可選的，默認值是5:5:1.0:5:5:0.0
l_msize_x:水平亮度矩陣，取值范圍3-13，默認值為5
l_msize_y:垂直亮度矩陣，取值范圍3-13，默認值為5
l_amount:亮度強度，取值范圍-2.0-5.0，負數為模糊效果，默認值1.0
c_msize_x:水平色彩矩陣，取值范圍3-13，默認值5
c_msize_y:垂直色彩矩陣，取值范圍3-13，默認值5
c_amount:色彩強度，取值范圍-2.0-5.0，負數為模糊效果，默認值0.0
eg:
使用默認值，亮度矩陣為5x5和亮度值為1.0
ffmpeg -i input.mp4 -vf unsharp output.mp4
高斯模糊效果(比較強的模糊)：
ffplay -i input.mp4 -vf unsharp=13:13:-2
語法：overlay[=x[:y]
所有的參數都是可選，默認值都是0
Logo在左上角
ffmpeg -i input.mp4 -i logo.png -filter_complex overlay output.mp4
右上角：
ffmpeg -i input.mp4 -i logo.png -filter_complex overlay=W-w output.mp4
左下角：
ffmpeg -i input.mp4 -i logo.png -filter_complex overlay=0:H-h output.mp4
右下角：
ffmpeg -i input.mp4 -i logo.png -filter_complex overlay=W-w:H-h output.mp4
刪除logo
語法：-vf delogo=x:y:w:h[:t[:show]]
x:y 離左上角的坐標
w:h logo的寬和高
t: 矩形邊緣的厚度默認值4
show：若設置為1有一個綠色的矩形，默認值0.
ffplay -i ji.mp4 -vf delogo=50:51:60:60:100:0
語法：
drawtext=fontfile=font_f:text=text1[:p3=v3[:p4=v4[…]]]
常用的參數值
x：離左上角的橫坐標
y: 離左上角的縱坐標
fontcolor：字體顏色
fontsize：字體大小
text:文本內容
textfile:文本文件
t：時間戳，單位秒
n:幀數開始位置為0
draw/enable:控制文件顯示，若值為0不顯示，1顯示，可以使用函數
1、在左上角添加Welcome文字
ffplay -i color=c=white -vf drawtext=fontfile=arial.ttf:text=Welcom
2、在中央添加Good day
ffplay -i color=c=white -vf drawtext="fontfile=arial.ttf:text='Goodday':x=(w-tw)/2:y=(h-th)/2"
3、設置字體顏色和大小
ffplay -i color=c=white -vf drawtext="fontfile=arial.ttf:text='Happy Holidays':x=(w-tw)/2:y=(h-th)/2:fontcolor=green:fontsize=30"
動態文本
用 t (時間秒)變數實現動態文本
1、頂部水平滾動
ffplay -i ji.mp4 -vf drawtext="fontfile=arial.ttf:text='Dynamic RTL text':x=w-t 50:fontcolor=darkorange:fontsize=30"
2、底部水平滾動
ffplay -i ji.mp4 -vf drawtext="fontfile=arial.ttf:textfile=textfile.txt:x=w-t 50:y=h-th:fontcolor=darkorange:fontsize=30"
3、垂直從下往上滾動
ffplay ji.mp4 -vf drawtext="textfile=textfile:fontfile=arial.ttf:x=(w-tw)/2:y=h-t*100:fontcolor=white:fontsize=30「
在右上角顯示當前時間 localtime
ffplay ji.mp4 -vf drawtext="fontfile=arial.ttf:x=w-tw:fontcolor=white:fontsize=30:text='%{localtime:%H:%M:%S}'「
每隔3秒顯示一次當前時間
ffplay ji.mp4 -vf drawtext="fontfile=arial.ttf:x=w-tw:fontcolor=white:fontsize=30:text='%{localtime:%H:%M:%S}':enable=lt(mod(t,3),1)"
FFmpeg支持絕大多數圖片處理, 除LJPEG（無損JPEG）之外，其他都能被解碼，除了EXR,PIC,PTX之外，所有的都能被編碼。
截取一張圖片使用 –ss(seek from start)參數.
ffmpeg -ss 01:23:45 -i ji.mp4 image.jpg
從視頻中生成GIF圖片
ffmpeg -i ji.mp4 -t 10 -pix_fmt rgb24 ji.gif
轉換視頻為圖片（每幀一張圖）
ffmpeg -i clip.avi frame%4d.jpg
圖片轉換為視頻
ffmpeg -f image2 -i img%4d.jpg -r 25 video.mp4
和視頻一樣，圖片也可以被裁剪和填充
裁剪
ffmpeg -f lavfi -i rgbtestsrc -vf crop=150:150 crop_rg.png
填充
ffmpeg -f lavfi -i smptebars -vf pad=360:280:20:20:orange pad_smpte.jpg
和視頻一樣圖片同樣能翻轉，旋轉和覆蓋
翻轉
ffmpeg -i orange.jpg -vf hflip orange_hfilp.jpg
ffmpeg -i orange.jpg -vf vflip orange_vfilp.jpg
旋轉
ffmpeg -i -vf transpose=1 image_rotated.png
覆蓋
ffmpeg -f lavfi -i rgbtestsrc -s 400x300 rgb .png
ffmpeg -f lavfi -i smptebars smpte.png
ffmpeg -i rgb .png -i smpte.png -filter_complex overlay= (W-w)/2:(H-h)/2 rgb_smpte.png
屏幕錄像
顯示設備名稱
ffmpeg -list_devices 1 -f dshow -i mmy
調用攝像頭
ffplay -f dshow -i video="Integrated Camera"
保存為文件
ffmpeg -y -f dshow -s 320x240 -r 25 -i video="Integrated Camera" -b:v 800K -vcodec mpeg4 new.mp4
添加字幕subtitles
語法 –vf subtitles=file
ffmpeg -i ji.mp4 -vf subtitles=rgb.srt output.mp4
視頻顫抖、色彩平衡
視頻顫抖
ffplay –i ji.mp4 -vf crop=in_w/2:in_h/2:(in_w-out_w)/2+((in_w-out_w)/2) sin(n/10):(in_h-out_h)/2 +((in_h-out_h)/2) sin(n/7)
色彩平衡
ffplay -i ji.mp4 -vf curves=vintage
色彩變幻
ffplay -i ji.mp4 -vf hue="H=2 PI t: s=sin(2 PI t)+1「
彩色轉換黑白
ffplay -i ji.mp4 -vf lutyuv="u=128:v=128"
設置音頻視頻播放速度
3倍視頻播放視頻
ffplay -i ji.mp4 -vf setpts=PTS/3
¾速度播放視頻
ffplay -i ji.mp4 -vf setpts=PTS/(3/4)
2倍速度播放音頻
ffplay -i speech.mp3 -af atempo=2
截圖
每隔一秒截一張圖
ffmpeg -i input.flv -f image2 -vf fps=fps=1 out%d.png
每隔20秒截一張圖
ffmpeg -i input.flv -f image2 -vf fps=fps=1/20 out%d.png
注意：ffmpeg version N-57961-gec8e68c版本最多可以每隔20s截一張圖。
多張截圖合並到一個文件里（2x3） 每隔一千幀(秒數=1000/fps25)即40s截一張圖
ffmpeg -i ji.mp4 -frames 3 -vf "select=not(mod(n,1000)),scale=320:240,tile=2x3" out.png
本篇文章主要記錄ffmpeg的一些基礎指令操作，該資料的來源是源於網上的一個ppt文檔，感謝文檔的總結。
Ⅱ FFmpeg命令行使用
FFmpeg的命令非常多，經常看著會雲里霧里的，個人認為沒必要去硬背，只要打開Terminal，輸入 ffmpeg -help 命令，這條命令會告述你FFmpeg支持的大部分常用命令以及使用方式。查看這些輸出的信息，基本上就會使用很多常用的命令了。
你會發現執行 ffmpeg -help 會輸出一大坨，那都是些啥玩意呢，不著急，咱們一步一步來慢慢品嘗。
第一個就是輸出我們安裝的FFmpeg的版本號
--prefix 是指FFmpeg的安裝路徑
--enable 是你安裝的FFmpeg支持的三方庫 這里可以看出支持 libx264 、 libx265 的編碼，以及支持 videotoolbox ， videotoolbox 是Mac、iOS上的一個系統自帶硬編解碼庫，FFmpeg也給予了支持，非常的給力。
這是輸出FFmpeg裡麵包含的庫，這些都是獨立的，是可以單獨拎出來使用的，你如果只要編解碼，那你就只要在項目中導入 libavcodec 即可
這是告訴我們命令行使用格式
[options] 這個是全局參數
[infile options] 這個是輸入文件的參數
infile 這個是輸入文件的路徑
[outfile options] 這個是輸出文件的參數
outfile 這個是輸出文件的路徑
細心的你肯定發現 infile 、 outfile 的後面有個 ... ，這是在告訴我們輸入、輸出文件可以分別有一個或者多個。
比如執行 ffmpeg -i test.h264 -i test.aac -c test.mp4
這條命令會把一個h264文件和一個aac的音頻文件合並並輸出一個mp4格式的文件，這其中就有兩個輸入文件、一個輸出文件。
這些是詳細的幫助信息
-h long 列印更多的選項參數。
-h full 列印所有的選項參數，包括所有針對於 format 和 codec 的選項，信息特別的長。
man ffmpeg : 查看FFmpeg的幫助手冊。
-h type=name 列印指定名稱的 decoder/encoder/demuxer/muxer/filter 的所有選項信息。
比如你要查詢 scale 濾鏡的使用方式，我們就執行 ffmpeg -h filter=scale
輸出如下：
這就告訴我們 scale 濾鏡有 w 、 h 等參數,我們就這樣使用 scale 濾鏡，
ffmpeg -i input.mp4 -filter_complex "scale=w=iw/2h=ih/2" output.mp4
其中 iw 代表輸入視頻的寬， ih 代表輸入視頻的高，這條命令就把輸入的視頻縮小一倍，這里你可能會有疑問，我都不記得那些濾鏡的名字，就無法使用這個去查了，哈哈不要急，還記得上面的幫助命令嗎， ffmpeg -filters 可以輸出所有的濾鏡名字了，如果你覺的輸出太多，你不好找的話，你只要記得這個濾鏡大概是叫什麼名字、包含什麼字母，你就藉助 grep 指令去輸出裡面搜索關鍵字，這樣就只會輸出你關心的濾鏡名了，如 ffmpeg -filters | grep over
以上是幫助命令，如果你忘記了某個編譯器、像素格式或者濾鏡的名字，你就可以用這些命令去查看。
以上就是全局參數
以上是音視頻的公共參數
以上是視頻處理相關參數
以上是音頻處理相關
以上字幕處理相關參數
以上就是 ffmpeg -help 的輸出說明了，下面咱們來看看常用的命令。
-r 10 表示1秒視頻會生成10張圖片
-f avfoundation 指定採用avfoundation採集數據使用
-i 1:0 表示 指定視頻設備索引為1，指定錄音設備索引為0。
使用 ffmpeg -list_devices 1 -f avfoundation -i '' 可以列印出設備列表，如下：
因此上述命令中的 -i 1:0 表示採用【Capture screen 0】【Built-in Microphone】即採用屏幕和系統自帶的麥克風進行採集。