数据湖智能分析系统-需求规格说明书.pdfVIP

数据湖智能分析系统 需求规格说明书 1 目 录 1 引言 3 1.1 编写目的 3 1.2 适用范围 3 2 功能需求 3 2.1 数据存储服务管理 3 2.1.1 功能描述 3 存储资源管理和监控 4 文件规范化存储规则管理 7 个人存储服务 12 文件存储监控 14 2.2 数据解析预处理 16 2.2.1 功能描述 16 XML 解析预处理 17 文本导入器 23 2 1 引言 1.1 编写目的 本文档是项目实施的基本依据， 包括项目范围、 功能要求等。 是系统概要设计及详细设 计的基石。 1.2 适用范围 本文档适用于数据湖智能分析系统的建设和规划中， 业务需求及功能要求， 保障系统工 程建设实施的顺利进行。 2 功能需求 2.1 数据存储服务管理 2.1.1 功能描述 数据存储服务产品主要解决大数据时代海量数据的分布式存储及管理问题。 本服务作为 实时数据湖智能分析系统中的一款子产品， 与各子产品之间呈现松耦合状态， 能够单独部署 于大数据存储应用场景。 数据存储服务管理分为存储资源管理和监控、文件存储监控、文件规范化存储、个人存 储服务四大模块。 存储资源管理和监控提供系统管理员对应用系统涉及的设备级存储资源及其使用状况 进行实时管理和监控的功能。 3 文件存储监控提供提供用户对系统内的文件存储情况进行实时监控的功能。 文件规范化存储提供系统管理员通过界面配置规则， 对系统级用户输出的数据文件实现 规范化存储功能。 个人存储服务提供个人用户使用数据存储服务的功能。 存储资源管理和监控 .1 业务逻辑 1 ． 存储资源管理和监控提供系统管理员添加注册设备级存储资源，并对已注册的存储 资源的使用情况进行实时数据监控的功能。 2 ． 页面呈现以下四个重点指标数