FFmpeg是一个开源免费跨平台的视频和音频流方案,属于自由软件,采用LGPL或GPL许可证(依据你选择的组件)。它提供了录制、转换以及流化音视频的完整解决方案。它包含了非常先进的音频/视频编解码libavcodec,为了保证高可移植性和编解码质量,libavcodec里很多codec都是从头开发的。
在OpenCV的视频处理部分就是用的ffmpeg,所以在安装OpenCV之前要安装好ffmpeg。
说明:
硬件平台:pcDuino V2
操作系统:ubuntu 12.07
编译器:gcc 4.6.3
OpenCV版本:2.4.8.2
安装ffmpeg
1, 卸载掉已经存在的软件包
1
|
$sudo apt-getremove ffmpeg x264 libav-tools libvpx-dev libx264-dev
|
2, 安装依赖软件包
1
2
3
4
5
6
7
8
9
|
$sudo apt-getupdate
$sudo apt-get-y install build-essential checkinstall git libgpac-dev \
libjack-jackd2-dev libmp3lame-dev libopencore-amrnb-dev libopencore-amrwb-dev \
librtmp-dev libsdl1.2-dev libtheora-dev libva-dev libvdpau-dev libvorbis-dev \
libx11-dev libxfixes-dev pkg-config texi2html yasm zlib1g-dev libxvidcore-dev
|
3, 在http://www.audiocoding.com/ 下载音频编码器,这里下载到的是faac-1.28和faad2-2.7在安装faac的时候会出现一个错误。
mpeg4ip.h:126:58: error: new declaration ‘char* strcasestr(const char*, const char*)’
解决办法是:
从123行开始修改此文件mpeg4ip.h,到129行结束。
修改前:
1
2
3
4
5
6
7
8
9
10
11
12
13
|
#ifdef __cplusplus
extern"C"{
#endif
char *strcasestr(constchar *haystack,constchar *needle);
#ifdef __cplusplus
}
#endif
|
修改后:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
|
#ifdef __cplusplus
extern"C++"{
#endif
constchar *strcasestr(constchar *haystack,constchar *needle);
#ifdef __cplusplus
}
#endif
解压faac软件包
|
$tar xvf faac-1.28.tar.bz2
进入faac源码包,配置,编译,使用checkinstall进行安装,安装之后可以生成deb,deb可以提供给别人直接安装。
1
2
3
4
5
6
7
8
9
|
$cd faac-1.28
$./configure
$make
$sudo checkinstall --pkgname=faac --pkgversion="1.28"--backup=no \
--deldoc=yes --fstrans=no --default
|
解压faad2软件包
$tar xvf faad2-2.7.tar.bz2
进入faad2源码包,配置,编译,使用checkinstall进行安装,安装之后可以生成deb,deb可以提供给别人直接安装。
1
2
3
4
5
6
7
8
9
|
$cd faad2-2.7
$./configure
$make
$ sudo checkinstall --pkgname=faad2 --pkgversion="2.7"--backup=no \
--deldoc=yes --fstrans=no –default
|
4,安装x264
h.264是视频编码器,下面的一些命令会下载源码,编译,和安装x264,可以从x264 Encoding Guide 上面找到一些例子。
进入上一层目录
$cd
使用git进行下载,你需要在使用之前安装好git,进入x264
1
2
3
4
5
6
7
8
9
10
11
12
13
|
$git clone --depth1git://git.videolan.org/x264
$cd x264
$./configure--enable-shared --enable-static
$make
$sudo checkinstall --pkgname=x264 --pkgversion="3:$(./version.sh | \
awk -F'[" ]''/POINT/{print $4"+git"$5}')" --backup=no --deldoc=yes \
--fstrans=no --default
|
5,安装libfdk-aac,这个是AAC音频编码器。
进入上一层目录
$cd
使用wget下载,系统已经预装,你可以直接使用
$wget http://downloads.sourceforge.net/opencore-amr/fdk-aac-0.1.0.tar.gz
解压软件包
$tar xzvf fdk-aac-0.1.0.tar.gz
进入fdk-acc源码包,配置,编译,使用checkinstall进行安装,安装之后可以生成deb,deb可以提供给别人直接安装。
1
2
3
4
5
6
7
8
9
|
$cd fdk-aac-0.1.0
$./configure
$make
$sudo checkinstall --pkgname=fdk-aac --pkgversion="0.1.0"--backup=no \
--deldoc=yes --fstrans=no --default
|
6,安装libvpx,这个是VP8视频编解码器。
进入上一层目录
$cd ..
使用git进行下载,你需要在使用之前安装好git
$git clone –depth 1 http://git.chromium.org/webm/libvpx.git
进入libvpx源码包,配置,编译,使用checkinstall进行安装,安装之后可以生成deb,deb可以提供给别人直接安装。
1
2
3
4
5
6
7
8
9
|
$cd libvpx
$./configure
$make
$sudo checkinstall --pkgname=libvpx --pkgversion="1:$(date +%Y%m%d%H%M)-git"--backup=no \
--deldoc=yes --fstrans=no --default
|
7,安装FFmpeg
进入上一层目录
$cd ..
使用git进行下载,你需要在使用之前安装好git
$git clone –depth 1 git://source.ffmpeg.org/ffmpeg
进入ffmpeg源码包,配置,编译,使用checkinstall进行安装,安装之后可以生成deb,deb可以提供给别人直接安装。
1
2
3
4
5
6
7
8
9
10
11
|
$cd ffmpeg
$./configure --enable-shared --arch=armhf --target-os=linux --enable-libxvid --enable-gpl --enable-libfaac --enable-libmp3lame --enable-libopencore-amrnb --enable-libopencore-amrwb --enable-librtmp --enable-libtheora --enable-libvorbis --enable-swscale --enable-libx264 --enable-nonfree --enable-version3 --enable-x11grab --enable-pic
$make
$sudo checkinstall --pkgname=ffmpeg --pkgversion="5:$(date +%Y%m%d%H%M)-git"--backup=no \
--deldoc=yes --fstrans=no --default
$hash x264 ffmpeg ffplay ffprobe
|
可选功能
1, qt-faststart。如果你想把你的H.264编码的MP4视频放到web,这个是一个非常有用的功能,这个工具的源码在之前已经下载了 。
这个在ffmpeg源码包里面,进入ffmpeg软件包
$cd ~/ffmpeg
直接编译qt-faststart文件夹
1
2
3
4
5
6
7
|
$make tools/qt-faststart
$sudo checkinstall --pkgname=qt-faststart --pkgversion="$(date +%Y%m%d%H%M)-git"--backup=no \
--deldoc=yes --fstrans=no --defaultinstall -Dm755 tools/qt-faststart \
/usr/local/bin/qt-faststart
|
用法
$qt-faststart input.mp4 output.mp4
升级ffmpeg
ffmpeg和x264的源码是经常变化的,在变化的过程中会修改很多bug。
1, 删除已经安装的软件包,然后升级这些软件包。
1
2
3
4
5
6
7
8
9
10
11
|
$sudo apt-get-y remove ffmpeg x264 libx264-dev libvpx-dev
$sudo apt-getupdate
$sudo apt-get-y install build-essential checkinstall git libfaac-dev libgpac-dev \
libjack-jackd2-dev libmp3lame-dev libopencore-amrnb-dev libopencore-amrwb-dev \
librtmp-dev libsdl1.2-dev libtheora-dev libva-dev libvdpau-dev libvorbis-dev \
libx11-dev libxfixes-dev texi2html yasm zlib1g-dev
|
2, x264
进入x264源码包,清除之前的编译,使用git更新源码。
1
2
3
4
5
|
$cd ~/x264
$make distclean
$git pull
|
更新源码之后按照之前的安装方式安装。
3, libvpx
进入libvpx源码包,清除之前的编译,使用git更新源码。
1
2
3
4
5
|
$cd ~/libvpx
$make clean
$git pull
|
更新源码之后按照之前的安装方式安装。
4, FFmpeg
进入ffmpeg源码包,清除之前的编译,使用git更新源码。
1
2
3
4
5
|
$cd ~/ffmpeg
$make distclean
$git pull
|
更新源码之后按照之前的安装方式安装。
测试ffmpeg
先查看一下版本,确认一下是否安装好。
1
2
3
4
5
6
7
8
9
10
11
12
|
ubuntu
@ubuntu :~/ffmpeg/ffmpeg$ ffmpeg -version
ffmpeg version git-2014-03-02-f5d1d1e
built on Mar 3201407:24:47withgcc4.6(Ubuntu/Linaro4.6.3-1ubuntu5)
configuration: --enable-shared --arch=armhf --target-os=linux --enable-libxvid --enable-gpl --enable-libfaac --enable-libmp3lame --enable-libopencore-amrnb --enable-libopencore-amrwb --enable-librtmp --enable-libtheora --enable-libvorbis --enable-swscale --enable-libx264 --enable-nonfree --enable-version3 --enable-x11grab --enable-pic
libavutil 52.66.100/52.66.100
libavcodec 55.52.102/55.52.102
libavformat 55.33.100/55.33.100
libavdevice 55.10.100/55.10.100
libavfilter 4. 2.100/ 4. 2.100
libswscale 2. 5.101/ 2. 5.101
libswresample 0.18.100/ 0.18.100
libpostproc 52. 3.100/52. 0. 0
|
顺便上传一个视频文件到板子上,用ffplayer播放,这个支持的很全的,只要是视频都能够播放。
$ffplayer xxxx.avi
ffmpeg的使用介绍
ffmpeg使用语法
ffmpeg [[options][`-i' input_file]]... {[options] output_file}...
如果没有输入文件,那么视音频捕捉(只在Linux下有效,因为Linux下把音视频设备当作文件句柄来处理)就会起作用。作为通用的规则,选项一 般用于下一个特定的文件。如果你给 –b 64选项,改选会设置下一个视频速率。对于原始输入文件,格式选项可能是需要的。缺省情况下,ffmpeg试图尽可能的无损转换,采用与输入同样的音频视 频参数来输出。
ffmpeg转换所涉及到的选项较多,可参考ffmpeg选项详解。
ffmpeg支持多种文件格式和多种音频、视频编码器,可参考ffmepg格式详解,(附:常见视频文件格式详解)
视频文件截图
- 截取一张352×240尺寸大小的,格式为jpg的图片
ffmpeg -i test.asf -y -f image2 -t 0.001 -s 352x240 a.jpg
- 把视频的前30帧转换成一个Animated Gif
ffmpeg -i test.asf -vframes 30 -y -f gif a.gif
- 截取指定时间的缩微图
ffmpeg -i test.avi -y -f image2 -ss 8 -t 0.001 -s 350x240 test.jpg-ss后跟的时间单位为秒
- 转换文件为3GP格式
ffmpeg -y -i test.mpeg -bitexact -vcodec h263 -b 128 -r 15 -s 176x144 -acodec aac -ac 2 -ar 22500 -ab 24 -f 3gp test.3gp或
ffmpeg -y -i test.wmv -ac 1 -acodec libamr_nb -ar 8000 -ab 12200 -s 176x144 -b 128 -r 15 test.3gp
视频格式转换
- 如何使用 ffmpeg 编码得到高质量的视频
ffmpeg.exe -i "D:\Video\Fearless\Fearless.avi" -target film-dvd -s 720x352 -padtop 64 -padbottom 64 -maxrate 7350000 -b 3700000 -sc_threshold 1000000000 -trellis -cgop -g 12 -bf 2 -qblur 0.3 -qcomp 0.7 -me full -dc 10 -mbd 2 -aspect 16:9 -pass 2 -passlogfile "D:\Video\ffmpegencode" -an -f mpeg2video "D:\Fearless.m2v"
- 转换指定格式文件到FLV格式
ffmpeg.exe -i test.mp3 -ab 56 -ar 22050 -b 500 -r 15 -s 320x240 f:\test.flv ffmpeg.exe -i test.wmv -ab 56 -ar 22050 -b 500 -r 15 -s 320x240 f:\test.flv
- 转码解密的VOB
ffmpeg -i snatch_1.vob -f avi -vcodec mpeg4 -b 800 -g 300 -bf 2 -acodec mp3 -ab 128 snatch.avi上面的命令行将vob的文件转化成avi文件,mpeg4的视频和mp3的音频。注意命令中使用了B帧,所以mpeg4流是divx5兼容的。GOP大小是300意味着29.97帧频下每10秒就有INTRA帧。该映射在音频语言的DVD转码时候尤其有用。
- 同时编码到几种格式并且在输入流和输出流之间建立映射
ffmpeg -i /tmp/a.wav -ab 64 /tmp/a.mp2 -ab 128 /tmp/b.mp2 -map 0:0 -map 0:0上面的命令行转换一个64Kbits 的a.wav到128kbits的a.mp2 ‘-map file:index’在输出流的顺序上定义了哪一路输入流是用于每一个输出流的。
- 转换文件为3GP格式
ffmpeg -i test.avi -y -b 20 -s sqcif -r 10 -acodec amr_wb -ab 23.85 -ac 1 -ar 16000 test.3gp注:如果要转换为3GP格式,则ffmpeg在编译时必须加上–enable-amr_nb –enable-amr_wb,详细内容可参考: 转换视频为3GPP格式
- 转换文件为MP4格式(支持iPhone/iTouch)
ffmpeg -y -i input.wmv -f mp4 -async 1-s 480x320 -acodec libfaac -vcodec libxvid -qscale 7 -dts_delta_threshold 1 output.mp4 ffmpeg -y -i source_video.avi input -acodec libfaac -ab 128000 -vcodec mpeg4 -b 1200000 -mbd 2 -flags +4mv+trell -aic 2 -cmp 2 -subcmp 2 -s 320x180 -title X final_video.mp4
- 将一段音频与一段视频混合
ffmpeg -i son.wav -i video_origine.avi video_finale.mpg
- 将一段视频转换为DVD格式
ffmpeg -i source_video.avi -target pal-dvd -ps 2000000000 -aspect 16:9 finale_video.mpeg注:target pal-dvd : Output format ps 2000000000 maximum size for the output file, in bits (here, 2 Gb) aspect 16:9 : Widescreen
- 转换一段视频为DivX格式
ffmpeg -i video_origine.avi -s 320x240 -vcodec msmpeg4v2 video_finale.avi
- Turn X images to a video sequence
ffmpeg -f image2 -i image%d.jpg video.mpg注:This command will transform all the images from the current directory (named image1.jpg, image2.jpg, etc…) to a video file named video.mpg.
- Turn a video to X images
ffmpeg -i video.mpg image%d.jpg注:This command will generate the files named image1.jpg, image2.jpg, …The following image formats are also availables : PGM, PPM, PAM, PGMYUV, JPEG, GIF, PNG, TIFF, SGI.
屏幕录制
- 使用ffmpeg录像屏幕
ffmpeg -vcodec mpeg4 -b 1000 -r 10 -g 300 -vd x11:0,0 -s 1024x768 ~/test.avi
:其中,-vd x11:0,0 指录制所使用的偏移为 x=0 和 y=0,-s 1024×768 指录制视频的大小为 1024×768。录制的视频文件为 test.avi,将保存到用户主目录中
如果你只想录制一个应用程序窗口或者桌面上的一个固定区域,那么可以指定偏移位置和区域大小。使用xwininfo -frame命令可以完成查找上述参数。- 重新调整视频尺寸大小
ffmpeg -vcodec mpeg4 -b 1000 -r 10 -g 300 -i ~/test.avi -s 800×600 ~/test-800-600.avi注:ffmpeg的屏幕录制功能只能在Linux环境下有效。
视频采集
- 把摄像头的实时视频录制下来,存储为文件
ffmpeg -f video4linux -s 320*240 -r 10 -i /dev/video0 test.asf更多信息可参考ffmpeg工程组论坛的讨论贴: 有关ffmpeg的视频采集注:ffmpeg的视频采集功能只能在Linux环境下使用
使用ffmpeg压制H.264视频
ffmpeg -threads 4 -i INPUT -r 29.97 -vcodec libx264 -s 480x272 -flags +loop -cmp +chroma -deblockalpha 0 -deblockbeta 0 -crf 24 -bt 256k -refs 1 -coder 0 -me umh -me_range 16 -subq 5 -partitions +parti4x4+parti8x8+partp8x8 -g 250 -keyint_min 25 -level 30 -qmin 10 -qmax 51 -trellis 2 -sc_threshold 40 -i_qfactor 0.71 -acodec libfaac -ab 128k -ar 48000 -ac 2 OUTPUT