数据处理系统功能需求.pdfVIP

数据处理系统需求

我的用户资料很多,现有数量5亿条左右

（每一条包括：姓名、电话、地址、省、市等等的信息）这些资料分别保存在不同的文件中，

现在有文件大约上万个，总大小400G左右,

日后会增加到50亿条左右吧,我要把所有的资料导入到一个软件系统中（统一在一个数据库

管理，方便更新、修改、查找、导出、统计等）

（这个数据库管理软件要求：可把文件批量导入软件系统，一份一份导入时间太长，工作效

率太低）、

导入导出速度要够快，处理100万条数据时间不会超过30秒。

再就是导入后的数据库文件不要逼源文件大很多，体积尽可能的小。

要求:

1、软件登陆要帐号和密码，最好是网络版，由一个服务器保存（因为多人使用，每个用户

和权限都是由管理员来开通和设置权限，管理员可以对用户设置权限项目包括：限制修

改内容、限制复制、限制导出、导入、限制能看到的用户资料目录项数、查看当前数据

库内总共有多少条信息、等）

2、软件系统用户资料目录项目可随意加、减。

3、支持TXT、Excel、Access格式文件导入、导出，同时要求能做到包括：“导入要求”和“导

出要求”

导入要求：

A、补导入的文件只要数据列中第一行的项目名称和软件用户资料目录项目相同的，系

统都会自动把这列所有内容对应来生成。如：XX文件打开后是下图的样子

这时我要把XX文件导入到系统中去，这时系统的项目列表是：如下图

当XX文件导入后，系统自动把“姓名、数据性质、年龄、卡型、手机号、性别”的

所有信息自动对应到系统上面去。最后生成：

B、导入数据后，系统会显示导入的全部数据内容“主要用于给管理员核对导入数据的

正确性”，数据导入确定没错后确认保存。

C、导入数据后系统会自动对每条信息生成一个编号和日期，方便日后查阅

“

导出要求：

A、导出筛选后符合条件的全部数据；

B、导出筛选后符合条件的数据当中的几列内容，也就是说可以选择要导出那一列的数

据，如：

数据中我只选择导出D、H列，其它的内容不导出，导出后文件：

筛选功能和Excel表格中一样的选项，而且还

增加一项批量筛选功能，如：我打个比方：我要在筛选的“地址”栏中筛选出只要包含

有：

高桥

“

高行

东沟

凌桥

金桥

曹路

高东

杨园

高南”其中之一字眼（这些字眼都保存在一个TXT文档当中，而且每个字眼都是单独

一列的，系统只要导入这个TXT文件就可以筛选）的信息都能同时被筛选出来。如：1、

上海浦东区高桥镇就西村92号；2、上海浦东区东沟镇大档村1292号

再如：我有一个TXT文件里面有很多手机号码我要把软件当

中“手机号”这列上所有相同的号码都

筛选出来。

5、数据筛选后，系统会显示当前筛选结果的数量（条数）。

6、资料修改功能：可单独修改每一项的内容，但要有保存和辙消功能；也可批量

修改，主要包括：

A、单个或全部替换功能，和Excel表格中。

相同。

B、单列修改：这个功能和Excel表格中拖拉修改功能一样，如：我筛选出一些符合条件的数据

出后我想对这些数据备注一下说明，但这些说明都是一样的，如在Excel表格中只要修改了第一

个，后面的只要按定拖拉就会修改全部的内容：

7、提供原码方便日后升级和平完善

8、系统备份，和系统还原功能。