ffmpeg编解码流程.docxVIP

FFMPEG编解码流程 一．基础知识介绍 在介绍FFMpeg编解码流程之前，先了解一下FFMpeg用到的头文件和库，还有一些主要的数据结构。 1.头文件 头文件的引入 extern C { #include libavcodec/avcodec.h #include libavformat/avformat.h #include libavutil/avutil.h #include libavutil/mem.h #include libavutil/fifo.h #include libswscale/swscale.h }; libavcodec用于存放各个encode/decode模块，CODEC其实是Coder和Decoder的缩写，也就是编码解码器，用于各种类型声音和图像的编解码。 libavformat用于存放muxer/demuxer模块，对音频视频格式的解析;用于各种音视频封装格式的生成和解析，包括获取解码所需信息以生成解码上下文结构和读取音视频帧等功能。 libswscale：用于视频场景比例缩放、色彩映射转换； 2.数据结构 以下介绍的数据结构定义在libavcodec/avcodec.h中。 1AVFormatContext Typedef struct AVFormatContext{ … AVOutputFormat *oformat; AVInputFormat *iformat; … Unsigned int nb_streams; AVStream **streams; … } AVFormatContext是FFMpeg格式转换过程中实现输入和输出功能，保存相关数据的主要结构，其作用贯穿整个编解码过程。 对于输入 输出需要分别对iformat和oformat赋值，在一个AVFormatContext结构变量中，oformat和iformat不能同时有值。 streams中保存了媒体文件的流信息，在解码时由av_find_stream_info()函数初始化，编码时需要使用者建立流并手动初始化,nb_streams是流的数量。 2AVStream Typedef struct AVStream{ int index; AVCodecContext *codec; … AVRational time_base; … int64 duration; int64 nb_frames; … } AVStream保存与数据流相关的编解码器，数据段等信息。codec保存的是encoder或者decoder的上下文信息。time_base在解码时由解码器设置，编码时在av_write_header（）函数中设置，在计算pts时会用到。Duration是流的总时间长度，nb_frames记录流的总帧数。 3AVCodecContext Typedef struct AVCodecContext{ … Struct AVCodec *codec; … enum AVMediaType codec_type; enum CodecID codec_id; … } 编解码器共用AVCodecContext和AVCodec结构，codec中保存编解码器参数，codec_type保存的AVMEDIA_TYPE_VIDEO，AVMEDIA_TYPE_AUDIO等媒体流的类型，codec_id保存编解码方式。 AVCodecContext中还包含其他一些重要的数据，如video的width,height,pix_fmt，audio的sample_rate等参数。这些参数在解码时由decoder设置，而编码是要有用户手动设置，如果参数设置错误或者没有设置，会导致avcodec_open()调用失败。 4AVCodec Typedef struct AVCodec{ …. Enum AVMediaType type; Enum CodecID id; int (*init)(AVCodecContext *); int (*encode)(AVCodecContext *, uint8_t *buf, int buf_size, void *data); int (*close)(AVCodecContext *); int (*decode)(AVCodecContext *, void *outdata,