Android多媒体框架OpenCore介绍.docVIP

Android的多媒体框架OpenCore介绍 分为几个阶段： 1、整个Android的多媒体框架OpenCore 2、Player和Author的详细介绍 2、OpenCore和Android其他部分的集成 第一部分 OpenCore概述 OpenCore的另外一个常用的称呼是PacketVideo，它是Android的多媒体核心。在防站的过程中，PacketVideo是一家公司的名称，而OpenCore是这套多媒体框架的软件层的名称。在Android的开发者中间，二者的含义基本相同。对比Android的其它程序库，OpenCore的代码非常庞大，它是一个基于C++的实现，定义了全功能的操作系统移植层，各种基本的功能均被封装成类的形式，各层次之间的接口多使用继承等方式。 OpenCore是一个多媒体的框架，从宏观上来看，它主要包含了两大方面的内容： PVPlayer：提供媒体播放器的功能，完成各种音频（Audio）、视频（Video）流的回放（Playback）功能 PVAuthor：提供媒体流记录的功能，完成各种音频（Audio）、视频（Video）流的以及静态图像捕获功能 PVPlayer和PVAuthor以SDK的形式提供给开发者，可以在这个SDK之上构建多种应用程序和服务。在移动终端中常常使用的多媒体应用程序，例如媒体播放器、照相机、录像机、录音机等等。 为了更好的组织整体的架构，OpenCore在软件层次在宏观上分成几个层次： OSCL：Operating System Compatibility Library (操作系统兼容库)，包含了一些操作系统底层的操作，为了更好地在不同操作系统移植。包含了基本数据类型、配置、字符串工具、IO、错误处理、线程等内 容，类似一个基础的C++库。 PVMF：PacketVideo Multimedia Framework（PV多媒体框架），在框架内实现一个文件解析（parser）和组成（composer）、编解码的NODE，也可以继承其通用的接口，在用户层实现一些NODE。 PVPlayer Engine：PVPlayer引擎。 PVAuthor Engine：PVAuthor引擎。 事实上，OpenCore中包含的内容非常多：从播放的角度，PVPlayer的输入的（Source）是文件或者网络媒体流，输出（Sink）是 音频视频的输出设备，其基本功能包含了媒体流控制、文件解析、音频视频流的解码（Decode）等方面的内容。除了从文件中播放媒体文件之外，还包含了与 网络相关的RTSP流（Real Time Stream Protocol,实时流协议）。在媒体流记录的方面，PVAuthor的输入的（Source）是照相机、麦克风等设备，输出（Sink）是各种文件， 包含了流的同步、音频视频流的编码（Encode）以及文件的写入等功能。 在使用OpenCore的SDK的时候，有可能需要在应用程序层实现一个适配器（Adaptor），然后在适配器之上实现具体的功能，对于PVMF的NODE也可以基于通用的接口，在上层实现，以插件的形式使用。 第二部分 OpenCore的代码结构 2.1 代码结构 以开源Android的代码为例，OpenCore的代码在以下目录中：external/opencore/。这个目录是OpenCore的根目录，其中包含的子目录如下所示： android：这里面是一个上层的库，它基于PVPlayer和PVAuthor的SDK实现了一个为Android使用的Player和Author。 baselibs：包含数据结构和线程安全等内容的底层库。 codecs_v2：这是一个内容较多的库，主要包含编解码的实现，以及一个OpenMAX的实现。 engines：包含PVPlayer和PVAuthor引擎的实现。 extern_libs_v2：包含了khronos的OpenMAX的头文件。 fileformats：文件格式的解析（parser）工具。 nodes：提供一些PVMF的NODE，主要是编解码和文件解析方面的。 oscl：操作系统兼容库。 pvmi： 输入输出控制的抽象接口。 protocols：主要是与网络相关的RTSP、RTP、HTTP等协议的相关内容。 pvcommon：pvcommon库文件的Android.mk文件，没有源文件。 pvplayer：pvplayer库文件的Android.mk文件，没有源文件。 pvauthor：pvauthor库文件的Android.mk文件，没有源文件。 tools_v2：编译工具以及一些可注册的模块。 在external/opencore/目录中还有2个文件，如下所示： Android.mk：全局的编译文件 pvpla