综合资源数据处理培训课程.pptVIP

Inspur group 某些情况下，原始的表数据可能无法满足汇总要求，这时就需要在原始数据的基础上用PERL进行二次分析，将数据处理成满足汇总条件的格式，重新插入新的表中以备数据汇总只用。二次数据也就应运而生。 例如：在汇总小区临区列表时要求将相邻小区以逗号分隔，更新到一个字段中。而原始文件采到的数据却是多条记录，这时就需要将这多条记录导出压缩成一条数据并以逗号分隔，以达到汇总需求。 缺点： 1、频繁导入、导出操作减慢了系统运行速度。 2、过多的操作增加了故障几率。例如：锁表、进程将死。 解决思路： 这对业务要求一定的了解，在文件分析时提早预见到所需数据的格式，必要时可以一个文件分析成多个db文件，分别达到不同的汇总要求。避免无谓的导入导出操作。 数据导出后的二次处理 第三十一页，共四十四页。 Inspur group 三、智能校验 二、资源自动采集 目录 四、传输数据处理 一、数据维护 第三十二页，共四十四页。 Inspur group * 智能校验 为了保证网络资源的完整性和准确性，智能模型校验功能将不符合业务规则的数据发现，放入灰名单库，通过短信、灰名单滚动提示、告警呈现、告警自动派发工单等多种途径提示维护人员及时维护数据，最大程度地实现资源数据的智能检错、纠错，提升资源数据的智能化管理程度和准确性管理。