第七章多媒体开发.pptVIP

第七章 多媒体开发 7.1 多媒体开发详解 　 7.1.1 Open Core 　　 7.1.2 MediaPlayer 　　 7.1.3 MediaRecorder 　　 7.2 播放音乐 　　 7.3 播放视频 　　 7.4 录制歌曲 　　 7.5 相机设置 　　 7.6 闹钟设置 　　 7.7 铃声设置 　　 7.8 小结 自1983年世界上第一款商用手机发布到现在，只经过了仅仅不到30年的时间，全球手机用户已达23亿之多，手机已成为人们必不可少的通信工具。从最初没有显示屏幕到黑白显示屏，再到现在的彩色显示屏，手机显示技术已经完成3次大的飞跃。随着达到高清电视全屏显示效果的新一代显示屏出现，手机业将掀起又一轮革新风暴。消费者对手机产品在商务和娱乐方面的要求越来越高，让手机日益成为便携式的商务或娱乐终端。在这种趋势下，显示功能更加清晰，色彩更加丰富，成为手机产品发展的必然趋势。在硬件的推动下，用户对手机软件的功能需求也越来越高。而Android系统也在不断更新以满足需求，因此手机多媒体技术的开发也就不可避免成为热点。本章我们就将介绍Android平台上多媒体开发。 7.1 多媒体开发详解 Android的核心代码在今年3月底有了一次比较重大的改动，尤其是多媒体方面的改动比较大，主要目的是为了更好地实现Camcorder，以及进一步实现Video Telephony。这些改动也是软硬件协调、结构和性能折中的一个结果。本节将介绍Android中多媒体开发基础。 7.1.1 Open Core Open Core是Android多媒体框架的核心，所有Android平台的音频、视频的采集以及播放等操作都是通过它来实现。它也被称为PV（Packet Video），Packet Video是一家专门提供多媒体解决方案的公司。程序员可以通过Open Core方便快速地开发出想要的多媒体应用程序，例如：录音、播放、回放、视频会议、流媒体播放等等。下面是Open Core的框架图，如图下所示。 从上图可以看出Open Core支持的格式包括：MPEG4、H.264、MP3、AAC、AMR、JPG、PNG、GIF等。Open Core多媒体框架有一套通用可扩展的接口，针对第三方的多媒体编码器，输入、输出设备等等。具体功能如下： 多媒体文件的播放、下载，包括：3GPP，MPEG-4，AAC和MP3 containers。 流媒体文件的下载、实时播放，包括：3GPP，HTTP，和RTSP/RTP。 动态视频和静态图像的编码、解码，例如：MPEG-4，H.263和AVC(H.264)，JPEG。 语音编码格式：AMR-NB和AMR-WB。 音乐编码格式：MP3，AAC，AAC+。 视频和图像格式：3GPP，MPEG-4和JPEG。 视频会议：基于H324-M标准。 Open Core是一个多媒体的框架，从宏观上来看，它主要包含了两大方面的内容： PVPlayer：提供多媒体播放器的功能，完成各种音频（Audio）、视频（Video）流的回放（Playback）功能。 PVAuthor：提供媒体流记录的功能，完成各种音频、视频流以及静态图像的捕获功能。 PVPlayer和PVAuthor以SDK的形式提供给开发者，可以在这个SDK之上构建多种应用程序和服务。在移动终端中常常使用多媒体应用程序，例如媒体播放器、照相机、录像机、录音机等等。 事实上，Open Core中包含的内容非常多：从播放的角度，PVPlayer输入的（Source）是文件或者网络媒体流，输出（Sink）到音频视频的输出设备，其基本功能包含了媒体流控制、文件解析、音频视频流的解码（Decode）等方面的内容。除了从文件中播放媒体文件之外，还包含了与网络相关的RTSP流。在媒体记录的方面，PVAuthor输入的是照相机、麦克风等设备，输出的是各种文件，包含了流的同步、音频视频流的编码（Encode）以及文件的写入等功能。 第1章介绍了Android平台的系统构架，从Android的系统构架图（见图1-6）可以看出Media Framework处于Libraries这一层，我们知道Library是C\C++来实现的它们通过java的JNI方式来调用。Open Core的代码在Android代码的External/Opencore目录中，其子目录及其具体功能描述如下： Android：这里面是一个上层的库，它实现了一个为Android使用的音视频采集、播放的接口，及DRM数字版权管理的接口实现。 Baselibs：包含数据结构和线程安全等内容的底层库。 Codecs_v2：音视频的解码器，基于OpenMAX的头文件。 Fileformats：文件格式的解析（Parser）工具