浅析Java程序IO性能改进策略.docVIP

浅析Java程序IO性能改进策略 　　摘 要：程序的I/O性能是影响程序性能的关键之一。有效地使用缓冲机制可以极大地提高程序的I/O性能。本文首先对java.io包做了一个简要的介绍，指出导致I/O性能低下的根本原因，然后循序渐进地采取了三种策略，逐步将I/O性能提高到168倍，这三种策略分别是采用缓冲流，定制自己的缓冲区，定制静态的固定长度的缓冲区。 　　关键词：I/O性能；流；缓冲区；分配和回收 　　中图分类号：TP311 文献标识码：A 　　Java应用程序都会经常使用java.io包，例如磁盘文件读写和通过网络传输数据。然而初学者由于对java.io包的理解的局限性导致编写的程序I/O性能很差。所幸的是，只要对java.io包有了很好的理解，就可以杜绝这方面的问题，从而保证程序拥有较好的I/O性能。 　　本文首先对java.io包做一个简要的介绍，然后指出导致I/O性能低下的根本原因是没有采用缓冲机制，然后循序渐进地采???了三种策略，将I/O性能逐步提高到168倍，这三种策略分别是采用缓冲流，定制自己的缓冲区，定制静态的固定长度的缓冲区。 　　1 I/O操作的基本概念 　　在Java I/O中最基本的概念是流（Stream），流是一个连续的字节序列，包括输入流和输出流，输入流用来读取这个序列，而输出流则用来写这个序列，在默认情况下Java的流操作是基于字节的，即一次只读或只写一个字节。 　　java.io包提供了InputStream和OutputStream作为对I/O操作的抽象，这两个接口决定了类层次结构的基本格局。InputStream和OutputStream的具体实现类提供了对不同数据源的访问，如磁盘文件和网络连接。 　　java.io包还提供了过滤流（Filter Stream），过滤流并不指向具体的数据源，而是在其他流之上进行了包装，这些过滤流其实是java.io包的核心。从性能的角度来看，最重要的过滤流是缓冲流（Buffered Stream），图1显示了一个简化的类层次结构图。 　　2 缓冲流 　　导致I/O性能低下的主要原因是没有对I/O操作进行缓冲。众所周知，硬盘擅长于大块数据的读写，但是在小量数据的读写上性能不好，所以，为了最大化I/O性能，我们应该选择批量的数据操作，而缓冲流正是为这个目的设计的。缓冲流，包括BufferedInputStream和BufferedOutputStream， 它为I/O流增加了内存缓冲区，使得Java程序一次可以向底层设备写入或者读取大量数据，从而提高了程序的性能。 　　为了更好地理解缓冲流的效果，请阅读程序清单一，这个例子采用了原始的文件流实现文件的拷贝。copy方法打开了一个FileInputStream 和一个FileOutputStream，并将数据从一个流直接拷贝到另一个流。由于read和write方法是基于字节的，所以实际的磁盘读写也是按字节发生的。实践证明使用这段代码拷贝一个8M的文本文件需要花费36750ms。 　　程序清单一中的copy方法只需稍作修改就能有效地改善性能，如程序清单二所示，它在原始的文件流之上采用了缓冲流BufferedInputStream和BufferedOutputStream，缓冲流将每一个小的读写请求积攒起来，然后一次性地批处理，通常是将几千个读写请求合并成一个大的请求。改进后的copy方法拷贝一个8M的文本文件需要花费1187ms，性能大约提高了31倍。 　　3 建立自己的缓冲 　　缓冲流虽然在它的内部增加了内存缓冲区，使得在缓冲区和底层设备之间写入或读取大量数据成为可能[2，3]，但是在这之上Java程序仍旧使用while循环从该流（实际上是缓冲数组）按字节读写数据。由于缓冲数组的大小是一定的，JVM需要针对数组做越界检查，该操作会导致额外的系统开销。另一方面，为了支持多线程环境，将数据从BufferedInputStream的缓冲数组拷贝到BufferedOutputStream的缓冲数组，其中的方法调用很多都是synchronized， 这也会导致额外的系统开销。所以尽管程序清单二所示代码可以有效地改善性能，但是改善的程度仍然不尽人意。 　　还是利用硬盘擅长读写大块数据这一特性，我们可以自己建立缓冲，以避免上述额外的系统开销。这需要使用InputStream和OutputStream提供的两个重载方法，它们允许按字节读写，也可以按字节数组读写，如下所示： 　　public int read（）； 　　public int read（byte[] bytes）； 　　public int write（）； 　　public int write（byte[] bytes）