基于oracle日志挖掘的增量同步方案的设计论文.pdfVIP

技术交流 基于oracle日志挖掘的增量同步方案的设计 沈一通云南省气象局 python脚本语言和sql 存储过程和视图的高并发且低复杂度的数据，该方案比流行同步方案优势在于简洁高效不影响实时业务。 Oracle loader 关键词：增量同步 LogMinerpythonsql 1设计目的 脚本语言python。都是常见且对于数据库新手也比较容易上手 对于Oracle数据库同步现在已经有很多方案，常见方案有 的工具，且可根据需要同步的数据灵活定制。 着以下优缺点： 2方案设计 ①通过触发器等方式提取源数据库数据生成脚本到目的数 本同步方案可以分为3个部分：源数据库日志挖掘部分、 据库执行。其优点在于自行编程，对数据的定制同步比较灵活。 入库信息转接部分、目的库入库部分。 缺点是效率低，大量数据同步时有可能影响数据库性能，只适 2．1源数据库日志挖掘 合运用于频率不高的小数据量同步。 Golden LogMiner安装与配置有较全的网络文档，可按文档针对数 ②通过Oracle Gate实现数据同步。该方案优点在 Golden 据库完成创建数据字典，添加分析的日志文件，启动LogMiner 于Oracle Gate是Oracle官方提供且功能强大。缺点 Golden 导出分析结果三个步骤的循环执行。 是Oracle Gate属于商业软件成本高，小系统开发不适 合。 例如在windows下的操作(使用DBA权限用户)： ①确保数据库执行在归档模式。 ③使用如SymmetricDS等开源免费的第三方工具同步。优 DATABASE 点在于互联网上便于找到技术支持和文档。其缺点在于对于大 执行ALTER ARCHⅣELOG；变更到归档 数据量时臃肿不稳定。 模式： SELECT FROMvSdatabase； ④使用类似kettle+ActiveMQ的中间件方式同步。优点是 dbid，name，log—mode 对于第一种方案的加强可以自由定制且提高效率。缺点是学习 验证处于归档模式。 成本多需要掌握中间件技术，对于简单同步大材小用。 ②创建数据字典初始化UTL—FILE_DIR参数。 基于以上流行同步方案，本文旨在设计一种针对应用中大 CREATEDIRECTORYutlfileAS’D：＼Oracle 量简单数据的增量同步的轻量化同步方案。本文所设计的方案 practicekLOGMNR) 涉及的工具分别是Oracle自带的LogMiner和sqlloader以及 括手势及运动估计。同时要考虑到光照影响，重建光场也至关 重要。在衣物的轮廓匹配中，也采用了自适应方法提高精确度。 参考文献 H，M—THALMANNN．Made- 【1】CORDIERF，SEO 同样地，rogge法的效果如图4所示： to-measure foranonline