- 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
- 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
【设计】数据采集系统设计思路 - - - - - -精品可编辑word学习资料
gP9K5B2A6W9 — — hG2F5E7H2Z10 — — lD2C7Z6X8L10
数据采集系统设计思路
基本功能
|精.
|品.
|可.
|编.
|辑.
|学.
|习.
|资.
|料.
*
|
*
|
*
|
*
|
|欢.
|迎.
|下.
|载.
将各采集点,如医院,药店等数据库(或其它数据载体)中的数据依据肯定 的规章提取,生成适合传输和存贮的文件, 通过互联网将文件上传到服务器, 服务器对数据进行分析处理,并依据肯定的配置条件进行数据告警处理,最 后把数据存贮于数据库服务器中,供应应其它应用系统进行数据查阅;
基本架构
主要包括前端数据采集和后台数据存贮两大功能; 前端采集负责把各种数据源中的数据按要求存为文件上传到后台服务器; 后台服务主要将上传的文件进行分析和存贮,如下图;
Web
Web 服务器
采集结果存贮
设备
Internet
数据采集服务器
数据查询
专用网络
便携电脑
Internet
采集设备
采集设备
采集设备
采集设备
采集对象
数据
数据
数据
|精.
|品.
|可.
|编.
|辑.
|学.
|习.
|资.
|料.
*
|
*
|
*
|
*
|
|欢.
|迎.
|下.
|载.
功能组成模块
前端采集系统功能模块 :
前端采集系统主要包括配置服务、数据查询、文件上传、日志、错误处理、自动更新服务、安全服务、网络服务等模块,各模块主要功能如下:
配置服务模块
配置模块至少供应二类接口,一是本地配置接口,本地可以通过配 置界面进行相关参数设置;二是远程配置接口,远程服务器可以通 过此接口下达配置命令, 实现远程配置, 便利以后前端系统的保护;需要实现的基本配置项:
. 服务器相关,包括服务器地址, 端口,使用长连接仍是短连接等;
. 文件传输相关,自动上传时间;文件在服务器上存贮的相对位置; 多个文件传输时使用单连接仍是多连接传输; 文件上传失败的重传间隔等;
. 数据库拜访相关, 数据库连接相关配置, 包括数据库类型, 连接
|精.
|品.
|可.
|编.
|辑.
|学.
|习.
|资.
|料.
*
|
*
|
*
|
*
|
|欢.
|迎.
|下.
|载.
串,用户名,密码;获得查询结果的相关 SQL 查询语句和查询条件;数据定时采集的时间;多条采集命令的优先级等;
. 程序升级更新相关, 包括手动仍是自动更新, 自动更新的时间等;
. 其它配置, 包括是否记录日志文件, 日志文件存放的路径, 单个日志文件的大小,日志文件最长存放的时间, 采集文件存放路径, 是否删除已经上传的采集文件, 是否对可用磁盘空间进行监控和剩余空间不足告警;登录相关配置等
注:招唤采集不供应单独的配置,招唤采集其实就是定时采集,由服务器下达一个优先级较高并立刻执行的采集配置命令即可;
配置数据读取功能,读取配置数据,供应应其它模块使用;
数据查询模块
针对不同的数据库,依据配置条件或接收的命令,查询数据库,生成查询结果记录集,系列化为二进制文件,使用高效压缩算法对文件进行压缩,依据文件命名规章存贮于指定位置;
文件上传模块
依据配置条件或接收到的命令,上传文件,包括需要的任何文件, 如采集的二进制结果文件,日志记录文件等;
日志模块
供应日志记录功能,其它模块可以通过本模块供应的接口进行日志记录;以及日志查询功能;
错误处理模块
包括输出程序出错信息,向服务器供应出错信息,便于程序排错升
|精.
|品.
|可.
|编.
|辑.
|学.
|习.
|资.
|料.
*
|
*
|
*
|
*
|
|欢.
|迎.
|下.
|载.
级;
自动更新服务
供应手动或自动更新服务,或者为服务器强制更新供应服务;
安全服务
供应前端系统登录认证服务,防止非法使用系统;
网络服务
供应与服务的连接服务,保护与服务的连接,与服务进行信息传输和文件传输,接收命令,将命令分发给相应的模块,转发各模块向服务器发送的服务恳求;
前端采集系统模块之间的层次关系
各模块功能独立, 通过各自供应的服务接口进行关联; 实现网络,业务规律, 界面分别;
用户界面 (UI)
数据配置模块 自动更新 数据采集 登录 文件上传
|精.
|品.
|可.
|编.
|辑.
|学.
|习.
|资.
|料.
*
|
*
|
*
|
*
|
|欢.
|迎.
|下.
|载.
日志记录
命令分发 ,解析数据,依据不同的数据分发给不同的模块;并将前端恳求信息转发给服务器
网络服务 ,供应网络连接,数据收发
后台存贮系统功能模块
基本参数配置功能,包括网络相关配置,告警参数配置,存贮配置 ,
登录用户配置等,如网络参数配置 :
网络服务模块, 供应 socket 连接的服务端, 为前端系
文档评论(0)