项目说明 数据采集与整合演示课件.pptVIP

提出需求与理解需求 ----数据准确考量(1/2) 由于系统运行过程中可能出现不可预知的状况,可能出现数据丢失的情况,从五个方面考虑数据的准确性问题: 综合考虑,先把日志文件在处理前进行备份.今后的任何失败,都可有原始数据参考. 客户端数据读取,解析: 解析没有匹配的数据一定要保存,在下次采集匹配的时候再次读取出来匹配.从理论上讲,登出数据肯定能找到匹配的登入数据.反之则不一定. 解析过程一般不会出现数据异常的情况. 提出需求与理解需求 ----数据准确考量(2/2) 客户端数据发送: 数据发送的时候,可能出现网络故障,数据可能发送不出去. 网络正常也有可能服务器端接收数据或保存数据错误. 上面两种或其他异常发生的时候,数据一定要保存到文件中,在下次采集的时候,先发送历史失败数据,在发送新采集的数据. 服务器端数据接受,存储: 在TCP协议下,在服务器端数据可能在保存数据库的时候出现错误,比如网络问题.当服务器出现保存错误的时候,向客户发送错误标记,让数据保存在客户端. 数据整合: 数据整合的时候,可能发送数据库网络连接失败,延时等问题或其他异常问题,则需要记录该整合相关数据,便于客户通过PL/SQL编程或其他程序进行定点补充整合. 提出需求与理解需求 ----采集系统与其他系统流程关系 提出需求与理解需求 ----采集系统程序结构 用户需求说明