Sybase数据仓库解决方案在贵州电信的应用.doc

Sybase数据仓库解决方案在贵州电信的应用 　　概述　　随着电信市场的逐步开放，新兴的运营商不断产生，电信市场的竞争日趋激烈。一方面，为了能够在竞争中生 存和持续发展，各电信运营商都对企业的经营和管理提出 了更高的要求。另一方面，电信运营商原来为支撑各种业 务运营所建立的计算机管理系统，由于功能比较单一，已 无法全面满足企业经营管理工作的需要，突出表现在: 单一系统产生的报表难以满足企业管理的要求; 相对固定的报表不能跟上市场形势的变化; 庞大的数据库系统不能有效地产生企业知识。电信企业迫切需要寻找到一种新的经营管理支撑手段，使管理人员能够及时准确地了解市场竞争、业务发展和资源使用情况，以便及时发现问题和解决问题，这正是电信经营分析系统的价值所在。 　　电信企业通过建设经营分析系统，能够最终实现基于 计算机管理系统的量化的闭环现代管理方式。即，由管理 层制定政策，各生产部门根据管理层制定的政策组织业务 管理，并把相关信息反馈给管理层，管理层分析反馈的信 息，进行政策的调整，从而完成企业管理的闭环化。 　　贵州电信经营分析系统建设思路 　　如何进行电信经营分析系统的建设呢? 　　首先，需要确定建设的路线和方针。这方面贵州电信 有着者一整套的思路，为了有效的应对将来剧烈的市场变 化，数据的集中是很关键的，集中的数据提供全省整体的 视图，是全局决策的基础。因此经营分析系统作为综合业 务管理系统的一部分，同样也按全省集中模式进行建设。 省集中模式是指“一级平台，两级应用”。“一级平台”即 在省一级建立统一的软硬件平台，对全省数据进行集中统 一管理，同时建立相应的容灾系统; “两级应用”即对系统应用而言，建立省中心和本地网两级应用模式。各地的服务器和终端根据本地网规模及功能要求按需配置。各地 州的客户资料、资源等数据以及主用系统与容灾系统之间的数据传输通过贵州电信 DCN 网实现。 　　其次，需要确定采用的技术路线贵州电信在对诸多数据仓库产品进行考察之后，考虑到 Sybase 产品的优异特性和在数据仓库行业的丰富经营，如: 广东电???运营分析系统、大鹏证券数据仓库项目、全国铁路客票系统、招商银行数据仓库项目、兴业证券数据仓库系统等; 最终选择了Sybase提供的整体完整的解决方案。 　　采用的Sybase商业智能方案　　根据贵州电信综合业务系统的要求，Sybase 和创智科技一起建议该决策支持系统解决方案采用集中式数据仓库建立的方式。决策分析系统从各业务系统采集所需数据，经过整理转换后，供决策分析系统使用。 　　数据仓库的实施是一个相当复杂的过程，主要包括五个部分的内容: 数据仓库的设计建模、数据转换与集成、数据存储与管理、数据的分析和展现和数据仓库的维护和管理。 　　Sybase提供了覆盖整个数据仓库建立周期的一套完整的产品包: Warehouse Studio，它包括数据仓库的建模、数据集成和转换、数据存储和管理、元数据管理和数据可视化分析等产品。以下说明了我们是如何结合 Sybase 的产品来做数据仓库的设计与开发。 　　产品逻辑配置图 　　数据存储与管理IQ　　数据仓库的存储可以选用多维数据库，也可以选用关系型数据库或其它特殊的存储方式。数据的存储要保证数据的安全性、完整性、一致性，同时还要具有复杂的分析查询的高效性。 　　Sybase的数据仓库产品 Sybase IQ 。IQ 是一个关系型数据库，为高性能决策支持和数据仓库的建立而进行了优化。IQ 中的关键技术是纵向数据存储（通过列而不是通过行来进行）、Bit-Wise 查询索引、数据压缩和 Multiplex 技术。使数据仓库应用拥有卓越的查询性能与最低的总拥有成本。 　　带压缩的列存储 适合决策处理中的很多查询只需要很少量的列数据。 按列存储数据时由于相邻的字段值具有相同的数据类型，所以使 Sybase IQ 更容易对数据做压缩处理。 增加列时不会引起数据库结构的改变。 IQ 比典型传统数据库引擎少做超过 10－100 倍的磁盘I/O。 　　独特的索引结构 专利的比特式索引及相应的压缩技术是Sybase 的一项专利。 Sybase IQ中对所有的列至少进行一次索引化，由此不仅带来查询效率的大幅提高，而且还降低了对磁盘空间的使用。IQ所需的磁盘一般只占原始输入数据所需空间的40％－ 60％，而且，查询速度会比传统的数据库引擎数以千倍的提高。 　　灵活性　　Sybase IQ支持任意类型的查询。存取方法只与数据有关而与查询无关,因此正确的数据结构在数据加载时就能够预期得到。因此，数据仓库的用户可以随心所欲地提出查询要求而无须数据库管理员作任何干预。 　　可扩展性　　Sybase IQ 还使企业在处理能力上拥有极大的伸缩性，用户可以从一个小型的数据仓库