批文件与BCP一种复制大批量数据方法.pdfVIP

1 of 10 批文件与BCP 一种复制大批量数据的方法 Tang, Dunyou, 18 May 2003 摘要 本文简要地介绍了批文件（Batch File ），OSQL ，ISQL 命令程序和批量复制 程序BCP （Bulk Copy Program ）。并且，通过一个实例，具体演示了如何编 写，利用批文件和批量复制程序BCP 来建立数据库（Database ），数据表 （Table ）以及依照给定的数据格式文件（Data Format Definition File ）从数据 文本文件（Data Text File ）中载入数据。 目录 1. 引言 2. 批文件（Batch File ）与批量复制程序BCP （Bulk Copy Program ）的概述 3. OSQL ，ISQL ，BCP 命令执行程序（OS Executable Command ）的简介 4. 数据格式说明文件（Data Format Definition File ） 5. 数据文件（Data Text File ） 6. 实例解析 7. 参考信息 1. 引言 MS SQL Server 7.0 和2000 【1】提供的Enterprise Manager, Query Analyzer 等视窗用户界面（GUI ）工具，功能强大，操作方便易行，已被越来越多的软 件开发人员（Developer ）和数据库管理人员（DBA ）所推崇。但从另一方面， 这也就可能使一些开发人员和数据库管理人员逐渐淡忘了像OSQL （ISQL ）， BCP 等命令程序。 然而，在某些情况下，这些命令程序还是有其特有优越的地方。 比如，没有另 外附加的额外程序（Overheads ）。开销小，占用的内存小。效率高，运行速 度快。特别对于大型数据库的大容量数据迁移，其性能尤为突出。 限于篇幅， 本文对批文件，OSQL ，ISQL 命令程序与批量复制程序BCP （Bulk Copy 2 of 10 Program ）只作一个简要的介绍。有兴趣的读者想了解更多的信息，请参阅本 文最后列出的或其他有关书籍。 本文的实例是基于一个取名为股票（Stocks ）的演示数据表。该表很简单，只 含俩个数据项（field ）。 股票-StockName 和股票编号-SedolCode 【2】 。 表 中的数据是从伦敦国际股市交易所列有的股票中随取了 12 ，000 种。 【1】本文对MS SQL Server 7.0 以前的版本不与进行讨论。 【2】SedolCode 的全称是Stock Exchange Daily Official List 的缩写。 SedolCode 是伦敦股市常用的股票编号系统之 一。 2. 批文件（Batch File ）与批量复制程序BCP （Bulk Copy Program ）的概述 在使用 SQL Server ，特别是处理大容量数据时，批文件和批量复制程序BCP （Bulk Copy Program ）是有效，常用的工具。 尤其对于用过SQL Server 早 期版本的人员，更是必不可少的工具。 把大量数据从一个数据库复制到另一个数据库，使用 DTS （Data Transformation Services ）当然可以。 但是，DTS 需要增加额外程序 （Overheads ），和占用内存，并最终通过OLE －DB 和 ODBC 层进行数据传 输与交换，这样既降低了效率，也减慢了传输速度。 所以，通常有效的方法是 先将数据复制到一个储存媒体（磁带，磁盘等）上的数据文件（Data Text File ），再从文件中将数据复制到另一个数据库。 批文件与批量复制程序BCP 就是用来执行批量复制工作的有效的工具。 提起批文件，大家一定都很熟悉。 它是一个普通的文本文件，列有一组 OS （Operation System) 编程命令，用于处理和完成一项指定的任务。当然 ，批 文件除了用于执行BCP 命令文件外，可以运行任何批处理。 3. OSQL ，I