ffmpeg(libav)解码全解析(带书签).pdfVIP

FFMPEG解码流程： 1. 注册所有容器格式和 CODEC: av_register_all() 2. 打开文件: av_open_input_file() 3. 从文件中提取流信息: av_find_stream_info() 4. 穷举所有的流，查找其中种类为 CODEC_TYPE_VIDEO 5. 查找对应的解码器: avcodec_find_decoder() 6. 打开编解码器: avcodec_open() 7. 为解码帧分配内存: avcodec_alloc_frame() 8. 不停地从码流中提取出帧数据: av_read_frame() 9. 判断帧的类型，对于视频帧调用: avcodec_decode_video() 10. 解码完后，释放解码器: avcodec_close() 11. 关闭输入文件: avformat_close_input_file() 主要数据结构： 基本概念: 编解码器、数据帧、媒体流和容器是数字媒体处理系统的四个基本概念。 首先需要统一术语： 容器／文件（Conainer/File）：即特定格式的多媒体文件。 媒体流（Stream）：指时间轴上的一段连续数据，如一段声音数据，一段视频数据或一 段字幕数据，可以是压缩的，也可以是非压缩的，压缩的数据需要关联特定的编解码器。 数据帧／数据包（Frame/Packet）：通常，一个媒体流由大量的数据帧组成，对于压缩数 据，帧对应着编解码器的最小处理单元。通常，分属于不同媒体流的数据帧交错复用于容器 之中，参见交错。 编解码器：编解码器以帧为单位实现压缩数据和原始数据之间的相互转换。 在 FFMPEG中，使用 AVFormatContext、AVStream、AVCodecContext、AVCodec及 AVPacket 等结构来抽象这些基本要素，它们的关系如上图所示： AVCodecContext： 这是一个描述编解码器上下文的数据结构，包含了众多编解码器需要的参数信息，如下 列出了部分比较重要的域： typedef struct AVCodecContext { / ** *一些编解码器需要/可以像使用 extradata Huffman表。 * MJPEG：Huffman表 * RV10其他标志 * MPEG4：全球头（也可以是在比特流或这里） *分配的内存应该是 FF_INPUT_BUFFER_PADDING_SIZE字节较大 *，比 extradata_size避免比特流器，如果它与读 prolems。 * extradata按字节的内容必须不依赖于架构或 CPU的字节顺序。 * - 编码：设置/分配/释放由 libavcodec的。 * - 解码：由用户设置/分配/释放。 * / uint8_t *extradata; int extradata_size; / ** *这是时间的基本单位，在条件（以秒为单位） *帧时间戳派代表出席了会议。对于固定 fps的内容， *基应该 1/framerate和时间戳的增量应该 *相同的 1。 * - 编码：必须由用户设置。 * - 解码：libavcodec的设置。 * / AVRational time_base; /*视频* / / ** *图片宽度/高度。 * - 编码：必须由用户设置。 * - 解码：libavcodec的设置。 *请注意：兼容性，它是可能的，而不是设置此 * coded_width/高解码之前。 * / int width, height; ...... / *仅音频* / int sample_rate; /// 每秒采样 int channels; /// 音频通道数 / ** *音频采样格式 * - 编码：由用户设置。 * - 解码：libavcodec的设置。 * / enum SampleFormat sample_fmt; /// 样本格式 / *下面的数据不应该被初始化。* / / ** *每包样品，初始化时调用“init”。 * / int frame_size; int frame_number; ///音频或视频帧数量 char codec_name[32]; enumAVMediaType codec_type; /* 看到 AVMEDIA_TYPE_xxx */ enum CodecID codec_id; /* see CODEC_ID_xxx */ / ** *的 fourcc（LSB在前，所以“的 ABCD” - （“D” 24）（“C” 16）（“B” 8）+“A”）。 *这是用来解决一些编码错误。 *分路器应设置什么是编解码器用于识别领域中。 *如果有分路器等多个领域，在一个容器，然后选择一个 *最大化使用的编解码器有关的