Qt与FFmpeg开发指南

ffmpeg Qt环境配置

ffmpeg新旧函数对比

ffmpeg常用函数

ffmpeg Qt环境配置

1.使用QtCreator创建完项目后，在项目根目录下创建ffmpeglib文件夹

2、把下载好的include文件夹和lib文件夹拷贝到ffmpeglib文件夹中

3、把dll文件夹中的所有.dll文件拷贝到项目根目录下的debug文件夹中（或项目根目录下也可以）

4、修改项目pro文件，在pro文件中增加如下内容：

INCLUDEPATH += $$PWD/ffmpeglib/include

#加入FFmpeg链接库

LIBS += $$PWD/ffmpeglib/lib/avcodec.lib \

        $$PWD/ffmpeglib/lib/avdevice.lib \

        $$PWD/ffmpeglib/lib/avfilter.lib  \

        $$PWD/ffmpeglib/lib/avformat.lib   \

        $$PWD/ffmpeglib/lib/avutil.lib      \

        $$PWD/ffmpeglib/lib/postproc.lib     \

        $$PWD/ffmpeglib/lib/swresample.lib    \

        $$PWD/ffmpeglib/lib/swscale.lib

5、测试FFmpeg库是否引入且能正常使用

在项目中main.cpp中添加如下FFmpeg头文件

extern "C"

{

//avcodec:编解码(最重要的库)

#include <libavcodec/avcodec.h>

//avformat:封装格式处理

#include <libavformat/avformat.h>

//swscale:视频像素数据格式转换

#include <libswscale/swscale.h>

//avdevice:各种设备的输入输出

#include <libavdevice/avdevice.h>

//avutil:工具库（大部分库都需要这个库的支持）

#include <libavutil/avutil.h>

#include "libavutil/imgutils.h"

#include "libavutil/opt.h"

//SwrContext音频重采样使用

#include <libswresample/swresample.h>

}

在main.cpp中进行测试

qDebug()<<"version:"<<avcodec_version();

ffmpeg新旧函数对比

从FFmpeg 3.0 开始 ， 使用了很多新接口，对不如下：

1. avcodec_decode_video2() 原本的解码函数被拆解为两个函数avcodec_send_packet()和avcodec_receive_frame() 具体用法如下：

old:

avcodec_decode_video2(pCodecCtx, pFrame, &got_picture, pPacket);

new:

avcodec_send_packet(pCodecCtx, pPacket);

avcodec_receive_frame(pCodecCtx, pFrame);

2. avcodec_encode_video2() 对应的编码函数也被拆分为两个函数avcodec_send_frame()和avcodec_receive_packet() 具体用法如下：

old:

avcodec_encode_video2(pCodecCtx, pPacket, pFrame, &got_picture);

new:

avcodec_send_frame(pCodecCtx, pFrame); avcodec_receive_packet(pCodecCtx, pPacket);

3. avpicture_get_size() 现在改为使用av_image_get_size() 具体用法如下：

old:

avpicture_get_size(AV_PIX_FMT_YUV420P, pCodecCtx->width, pCodecCtx->height);

new: //最后一个参数align这里是置1的，具体看情况是否需要置1

av_image_get_buffer_size(AV_PIX_FMT_YUV420P, pCodecCtx->width, pCodecCtx->height, 1);

4. avpicture_fill（） 现在改为使用av_image_fill_arrays 具体用法如下：

old:

avpicture_fill((AVPicture *)pFrame, buffer, AV_PIX_FMT_YUV420P, pCodecCtx->width, pCodecCtx->height);

new: //最后一个参数align这里是置1的，具体看情况是否需要置1

av_image_fill_arrays(pFrame->data, pFrame->linesize, buffer, AV_PIX_FMT_YUV420P, pCodecCtx->width, pCodecCtx->height,1);

5. 关于codec问题有的可以直接改为codecpar，但有的时候这样这样是不对的，所以我也还在探索，这里记录一个对pCodecCtx和pCodec赋值方式的改变

old:

pCodecCtx = pFormatCtx->streams[video_index]->codec; pCodec = avcodec_find_decoder(pFormatCtx->streams[video_index]->codec->codec_id);

new:

pCodecCtx = avcodec_alloc_context3(NULL); avcodec_parameters_to_context(pCodecCtx,pFormatCtx->streams[video_index]->codecpar); pCodec = avcodec_find_decoder(pCodecCtx->codec_id);

6. PIX_FMT_YUV420P -> AV_PIX_FMT_YUV420P

7. 'AVStream::codec': 被声明为已否决:

old:

if(pFormatCtx->streams[i]->codec->codec_type==AVMEDIA_TYPE_VIDEO){

new:

if(pFormatCtx->streams[i]->codecpar->codec_type==AVMEDIA_TYPE_VIDEO){

8. 'AVStream::codec': 被声明为已否决:

old:

pCodecCtx = pFormatCtx->streams[videoindex]->codec;

new:

pCodecCtx = avcodec_alloc_context3(NULL); avcodec_parameters_to_context(pCodecCtx, pFormatCtx->streams[videoindex]->codecpar);

9. 'avpicture_get_size': 被声明为已否决:

old:

avpicture_get_size(AV_PIX_FMT_YUV420P, pCodecCtx->width, pCodecCtx->height)

new:

#include "libavutil/imgutils.h"

av_image_get_buffer_size(AV_PIX_FMT_YUV420P, pCodecCtx->width, pCodecCtx->height, 1)

10. 'avpicture_fill': 被声明为已否决:

old:

avpicture_fill((AVPicture *)pFrameYUV, out_buffer, AV_PIX_FMT_YUV420P, pCodecCtx->width, pCodecCtx->height);

new:

av_image_fill_arrays(pFrameYUV->data, pFrameYUV->linesize, out_buffer, AV_PIX_FMT_YUV420P, pCodecCtx->width, pCodecCtx->height, 1);

11. 'avcodec_decode_video2': 被声明为已否决:

old:

ret = avcodec_decode_video2(pCodecCtx, pFrame, &got_picture, packet); //got_picture_ptr Zero if no frame could be decompressed

new:

ret = avcodec_send_packet(pCodecCtx, packet);

got_picture = avcodec_receive_frame(pCodecCtx, pFrame); //got_picture = 0 success, a frame was returned //注意：got_picture含义相反

或者：

int ret = avcodec_send_packet(aCodecCtx, &pkt);

if (ret != 0)

{

prinitf("%s/n","error");

return;

} while( avcodec_receive_frame(aCodecCtx, &frame) == 0)

{

//读取到一帧音频或者视频 //处理解码后音视频 frame

}

12. 'av_free_packet': 被声明为已否决:

old:

av_free_packet(packet);

new:

av_packet_unref(packet);

13. avcodec_decode_audio4：被声明为已否决：

old:

result = avcodec_decode_audio4(dec_ctx, out_frame, &got_output, &enc_pkt);

new:

int ret = avcodec_send_packet(dec_ctx, &enc_pkt);

if (ret != 0)

{

prinitf("%s/n","error");

} while( avcodec_receive_frame(dec_ctx, &out_frame) == 0)

{

//读取到一帧音频或者视频

//处理解码后音视频 frame

}

旧接口av_register_all()------------新版不需要注册

PKT_FLAG_KEY ---------------->AV_PKT_FLAG_KEY

AV_CODEC_CAP_DELAY----->AV_CODEC_CAP_DELAY

guess_format ------------>av_guess_format 

av_alloc_format_context ---------->avformat_alloc_output_context 

CODEC_TYPE_VIDEO ----------------->AVMEDIA_TYPE_VIDEO

CODEC_TYPE_AUDIO ---------------->AVMEDIA_TYPE_AUDIO

audio_resample_init ----------------->av_audio_resample_init 

PIX_FMT_YUV420P -> AV_PIX_FMT_YUV420P

AVStream::codec     被声明为已否决

'avpicture_get_size’: 被声明为已否决

新的API中将AVStream结构体中codec作了遗弃处理，当需要解码器上下文的时候，需要用AVCodecParameters去转化，解决方案是如下

av_free_packet(packet)--------------------> av_packet_unref(packet);

FFMPEG常用函数

FFMpeg 中比较重要的函数以及数据结构如下:

数据结构:

(1) AVFormatContext

(2) AVOutputFormat

(3) AVInputFormat

(4) AVCodecContext

(5) AVCodec

(6) AVFrame

(7) AVPacket

(8) AVPicture

(9) AVStream

初始化函数:

(1) av_register_all()

(2) avcodec_open()

(3) avcodec_close()

(4) av_open_input_file()

(5) av_find_input_format()

(6) av_find_stream_info()

(7) av_close_input_file()

音视频编解码函数:

(1) avcodec_find_decoder()

(2) avcodec_alloc_frame()

(3) avpicture_get_size()

(4) avpicture_fill()

(5) img_convert()

(6) avcodec_alloc_context()

(7) avcodec_decode_video()

(8) av_free_packet()

(9) av_free()

文件操作:

(1) avnew_steam()

(2) av_read_frame()

(3) av_write_frame()

(4) dump_format()

其他函数:

(1) avpicture_deinterlace()

(2) ImgReSampleContext()