FFMPEG简介

FFmpeg的名称来自MPEG视频编码标准，前面的“FF”代表“Fast Forward”，FFmpeg是一套可以用来记录、转换数字音频、视频，并能将其转化为流的开源计算机程序。可以轻易地实现多种视频格式之间的相互转换。

FFmpeg的用户有Google，Facebook，Youtube，优酷，爱奇艺，土豆等

基础知识

1.容器/文件(Conainer/File)：即特定格式的多媒体文件，比如mp4、flv、mkv等。

2.媒体流（Stream）：表示时间轴上的一段连续数据，如一段声音数据、一段视频数据或一段字幕数据，可以是压缩的，也可以是非压缩的，压缩的数据需要关联特定的编解码器。

3.数据帧/数据包(Frame/Packet)：通常，一个媒体流是由大量的数据帧组成的，对于压缩数据，帧对应着编解码器的最小处理单元，分属于不同媒体流的数据帧交错存储于容器之中。

    一般情况下：

    Frame对应压缩前的数据，Packet对应压缩后的数据。

4.编解码器(Codec)：以帧为单位实现压缩数据和原始数据之间的相互转换的

5.复用(mux)：把不同的流按照某种容器的规则放入容器，这种行为叫做复用（mux）

6.解复用(mux)：把不同的流从某种容器中解析出来，这种行为叫做解复用(demux)

7.码率和帧率是视频文件的最重要的基本特征，对于他们的特有设置会决定视频质量。如果我们知道码率和时长那么可以很容易计算出输出文件的大小。

8.帧率：帧率也叫帧频率，帧率是视频文件中每一秒的帧数，肉眼想看到连续移动图像至少需要15帧。

9.码率：比特率(也叫码率，数据率)是一个确定整体视频/音频质量的参数，秒为单位处理的位数，码率和视频质量成正比，在视频文件中中比特率用bps来表达。

FFMPEG命令行环境搭建

1. 到ffmpeg官方下载已经编译好的Windows shared库；

2. 将执行文件ffmpeg.exe ffplay.exe ffprobe.exe拷贝到C:\Windows目录;

3. 将相应的动态库拷贝到C:\Windows\SysWOW64目录；

注：WOW64 (Windows-on-Windows 64-bit)

4. 在命令行窗口输入ffmpeg -version 查看版本，以却确定环境是否搭建成功。

FFMPEG如何查询命令帮助文档

ffmpeg/ffplay/ffprobe区别

ffmpeg:

Hyper fast Audio and Video encoder

超快音视频编码器（类似爱剪辑）

ffplay:

Simple media player简单媒体播放器

ffprobe:

Simple multimedia streams analyzer

简单多媒体流分析器

ffprobe命令查看帮助文档

所有信息：ffprobe -h

usage:

ffprobe [OPTIONS] [INPUT_FILE]

ffmpeg/ffplay/ffprobe部分参数通用，部分参数不通用，在使用时需要注意。

ffmpeg命令查看帮助文档

ffplay命令查看帮助文档

所有信息：ffplay -h

usage:

ffplay [options] input_file

ffmpeg音视频处理流程​

ffmpeg命令分类查询

ffplay播放控制

ffplay命令选项

ffplay命令-主要选项

ffplay命令-高级选项

ffplay命令播放媒体

播放本地文件播放YUV数据

ffplay -window_title "test time" -ss 2 -t 10 -autoexit test.mp4

ffplay buweishui.mp3

播放网络流

ffplay -window_title "rtmp stream" rtmp://202.69.69.180:443/webcast/bshdlive-pc

强制解码器

mpeg4解码器：ffplay  -vcodec mpeg4 test.mp4

h264解码器：ffplay -vcodec h264 test.mp4

禁用音频或视频

禁用音频：ffplay test.mp4 -an

禁用视频：ffplay test.mp4 -vn

ffplay -pixel_format yuv420p -video_size 320x240 -framerate 5  yuv420p_320x240.yuv

播放RGB数据

ffplay -pixel_format rgb24 -video_size 320x240 -i rgb24_320x240.rgb

ffplay -pixel_format rgb24 -video_size 320x240 -framerate 5  -i rgb24_320x240.rgb

播放PCM数据

ffplay -ar 48000 -ac 2 -f f32le 48000_2_f32le.pcm

  -ar        set audio sampling rate (in Hz) (from 0 to INT_MAX) (default 0)

  -ac      set number of audio channels (from 0 to INT_MAX) (default 0)

ffplay简单过滤器

视频旋转

ffplay -i test.mp4 -vf transpose=1

  视频反转

ffplay test.mp4 -vf hflip

ffplay test.mp4 -vf vflip

  视频旋转和反转

ffplay test.mp4 -vf hflip,transpose=1

音频变速播放

  ffplay -i test.mp4 -af atempo=2

视频变速播放

  ffplay -i test.mp4 -vf setpts=PTS/2

  音视频同时变速

  ffplay -i test.mp4 -vf setpts=PTS/2 -af atempo=2

ffmpeg命令参数说明

ffmpeg命令�提取音视频数据

保留封装格式

ffmpeg -i test.mp4 -acodec copy -vn audio.mp4

   ffmpeg -i test.mp4 -vcodec copy -an video.mp4

提取视频   

保留编码格式：ffmpeg -i test.mp4 -vcodec copy -an test_copy.h264

   强制格式：ffmpeg -i test.mp4 -vcodec libx264 -an test.h264

提取音频

     保留编码格式：ffmpeg -i test.mp4 -acodec copy -vn test.aac

   强制格式：ffmpeg -i test.mp4 -acodec libmp3lame -vn test.mp3

ffmpeg命令提取像素格式和PCM数据

ffmpeg命令提取像素格式

提取YUV

提取3秒数据，分辨率和源视频一致

ffmpeg -i test_1280x720.mp4 -t 3 -pix_fmt yuv420p yuv420p_orig.yuv

提取3秒数据，分辨率转为320x240

ffmpeg -i test_1280x720.mp4 -t 3 -pix_fmt yuv420p -s 320x240 yuv420p_320x240.yuv

提取RGB

提取3秒数据，分辨率转为320x240

ffmpeg -i test.mp4 -t 3 -pix_fmt rgb24 -s 320x240 rgb24_320x240.rgb

RGB和YUV之间的转换

  ffmpeg -s 320x240 -pix_fmt yuv420p -i yuv420p_320x240.yuv -pix_fmt rgb24 rgb24_320x240_2.rgb

提取PCM

ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -f s16le 48000_2_s16le.pcm

ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -sample_fmt s16 out_s16.wav

ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -codec:a pcm_s16le out2_s16le.wav

ffmpeg -i buweishui.mp3 -ar 48000 -ac 2 -f f32le 48000_2_f32le.pcm

 ffmpeg -i test.mp4 -t 10 -vn -ar 48000 -ac 2 -f f32le 48000_2_f32le_2.pcm

ffmpeg命令转封装

ffmpeg命令转封装

保持编码格式：

ffmpeg -i test.mp4 -vcodec copy -acodec copy test_copy.ts

ffmpeg -i test.mp4 -codec copy test_copy2.ts

改变编码格式：

ffmpeg -i test.mp4 -vcodec libx265 -acodec libmp3lame out_h265_mp3.mkv

修改帧率：

ffmpeg -i test.mp4 -r 15 -codec copy output.mp4 (错误命令)

ffmpeg -i test.mp4 -r 15 output2.mp4

修改视频码率：

ffmpeg -i test.mp4 -b 400k output_b.mkv （此时音频也被重新编码）

修改视频码率：

ffmpeg -i test.mp4 -b:v 400k output_bv.mkv

修改音频码率：

ffmpeg -i test.mp4 -b:a 192k output_ba.mp4

如果不想重新编码video，需要加上-vcodec copy

修改音视频码率：

ffmpeg -i test.mp4 -b:v 400k -b:a 192k output_bva.mp4

修改视频分辨率：

ffmpeg -i test.mp4 -s 480x270 output_480x270.mp4

修改音频采样率:

ffmpeg -i test.mp4 -ar 44100 output_44100hz.mp4

ffmpeg命令过滤器

生成测试文件

找三个不同的视频每个视频截取10秒内容

ffmpeg -i 沙海02.mp4 -ss 00:05:00 -t 10 -codec copy 1.mp4

ffmpeg -i 复仇者联盟3.mp4 -ss 00:05:00 -t 10 -codec copy 2.mp4

ffmpeg -i 红海行动.mp4 -ss 00:05:00 -t 10 -codec copy 3.mp4

        如果音视频格式不统一则强制统一为 -vcodec libx264 -acodec aac

将上述1.mp4/2.mp4/3.mp4转成ts格式

ffmpeg -i 1.mp4 -codec copy -vbsf h264_mp4toannexb 1.ts

ffmpeg -i 2.mp4 -codec copy -vbsf h264_mp4toannexb 2.ts

ffmpeg -i 3.mp4 -codec copy -vbsf h264_mp4toannexb 3.ts

转成flv格式

ffmpeg -i 1.mp4 -codec copy 1.flv

ffmpeg -i 2.mp4 -codec copy 2.flv

ffmpeg -i 3.mp4 -codec copy 3.flv

分离某些封装格式（例如MP4/FLV/MKV等）中的H.264的时候，需要首先写入SPS和PPS，否则会导致分离出来的数据没有SPS、PPS而无法播放。H.264码流的SPS和PPS信息存储在AVCodecContext结构体的extradata中。需要使用ffmpeg中名称为“h264_mp4toannexb”的bitstream filter处理

开始拼接文件

以MP4格式进行拼接

方法1：ffmpeg -i "concat:1.mp4|2.mp4|3.mp4" -codec copy out_mp4.mp4

方法2：ffmpeg -f concat -i mp4list.txt -codec copy out_mp42.mp4

以TS格式进行拼接

方法1：ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out_ts.mp4

方法2：ffmpeg -f concat -i tslist.txt -codec copy out_ts2.mp4

以FLV格式进行拼接

方法1：ffmpeg -i "concat:1.flv|2.flv|3.flv" -codec copy out_flv.mp4

方法2：ffmpeg -f concat -i flvlist.txt -codec copy out_flv2.mp4

方法1只适用部分封装格式，比如TS

建议：

（1）使用方法2进行拼接

（2）转成TS格式再进行拼接

测试不同编码拼接

修改音频编码

ffmpeg -i 2.mp4 -vcodec copy -acodec ac3 -vbsf h264_mp4toannexb 2.ts

ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out1.mp4 结果第二段没有声音

修改音频采样率

ffmpeg -i 2.mp4 -vcodec copy -acodec aac -ar 96000 -vbsf h264_mp4toannexb 2.ts

ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out2.mp4  第二段播放异常

修改视频编码格式

ffmpeg -i 1.mp4 -acodec copy -vcodec libx265 1.ts

ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out3.mp4

修改视频分辨率

ffmpeg -i 1.mp4 -acodec copy -vcodec libx264 -s 800x472 -vbsf h264_mp4toannexb 1.ts

ffmpeg -i "concat:1.ts|2.ts|3.ts" -codec copy out4.mp4

注意：

把每个视频封装格式也统一为ts，拼接输出的时候再输出你需要的封装格式，比如MP4

视频分辨率可以不同，但是编码格式需要统一

音频编码格式需要统一，音频参数(采样率/声道等)也需要统一

fmpeg命令图片与视频互转​

截取一张图片

 ffmpeg -i test.mp4 -y -f image2 -ss 00:00:02 -vframes 1 -s 640x360 test.jpg

 ffmpeg -i test.mp4 -y -f image2 -ss 00:00:02 -vframes 1 -s 640x360 test.bmp

 -i 输入 

 -y 覆盖 

 -f 格式 image2 一种格式

 -ss 起始值 

 -vframes 帧 如果大于1 那么 输出加%03d test%03d.jpg

-s 格式大小size

转换视频为图片（每帧一张图):

 ffmpeg -i test.mp4 -t 5 -s 640x360 -r 15 frame%03d.jpg 

 图片转换为视频:　　 

ffmpeg -f image2 -i frame%03d.jpg -r 25 video.mp4

从视频中生成GIF图片

 ffmpeg -i test.mp4 -t 5 -r 1 image1.gif 

ffmpeg -i test.mp4 -t 5 -r 25 -s 640x360 image2.gif

 将 GIF 转化为 视频

 ffmpeg -f gif -i image2.gif image2.mp4