大数据技术发展的趋势及灯塔大数据行业的应用平台.docVIP

大数据技术发展的趋势及灯塔大数据行业的应用平台 　　摘要：指出大数据发展的趋势：混合数据存储是大数据技术的基础；融合数据库架构是大数据发展的趋势；异构数据关联是大数据平台的关键；行业知识库是产业互联网应用发展的要素；深度标签是大数据挖掘的核心技术之一。介绍了中国电信灯塔大数据行业应用平台的架构，及所采用的关键技术和行业应用，认为该平台的使用可以充分发挥运营商数据与外部数据相结合的优势，加速产业升级和商业模式创新。 　　关键词： 大数据；趋势；灯塔；应用 　　Abstract： In this paper， trends in big data technology are discussed. Mixed data storage is the foundation of big data technology； database schema integration is the trend of the development of big data； heterogeneous data association is key to big data platform； industry knowledge database is the key elements of the application and development of the Internet industry； depth labels is one of the core technologies of data mining. Then， the Dengta big data industry application platform of China Telecom is introduced. This platform can be fully combined with operator data and external data in order to accelerate industrial upgrading and innovation of business model. 　　big data； trend； Dengta； application 　　大数据是信息时代技术创新的产物，大数据与云计算、物联网等新技术相结合，正日益深刻地改变着人们的生产生活方式。大数据产业的出现和发展是现代信息技术与互联网时代海量信息发展到一定阶段的必然结果，必将对当今社会的信息技术、商业模式和相关的法律法规产生深刻影响。大数据经历了基础理论研究和产业应用探索，与行业应用结合已成为大数据发展的新机遇。 　　1 大数据技术发展趋势 　　（1）混合数据存储是大数据技术的基础 　　在大数据环境下，数据量达到了PB级甚至EB级。大数据存储一方面需要提供超大容量的存储空间，另一方面需要支持对海量数据的智能检索和分析。为了兼容各种类型的大数据应用，大数据存储需要提供混合的数据存储模型，支持文件、对象、键值、块等多种访问接口，作为大数据技术的基础[1-2]。 　　（2）融合数据库架构是大数据发展的趋势 　　随着大数据业务的发展，除了面向强关系型的结构化查询语言（SQL）数据库之外，面向各类应用的接口灵活、功能丰富且高效的NoSQL数据库也得到了蓬勃发展。在应用类型多样、数据种类繁多的大数据平台中，融合关系型数据库、列数据库、内存数据库、图数据库等多种数据库的混合数据库架构，能够满足多种场景下的数据处理需求，是大数据发展的必然趋势。 　　（3）异构数据关联是大数据平台的关键 　　当前，各行业、企业、系统、平台都累积了海量的数据，这些数据结构不同且相对独立，在没有建立起关联关系的情况下，难以展现出数据的优势。将这些多源异构数据进行关联和融合，挖掘数据之间的相关性，能够为数据分析奠定坚实的基础，最大限度地发挥数据价值，是大数据平台的关键所在。 　　（4）行业知识库是产业互联网发展的要素 　　随着“互联网+”战略的实施，各产业尤其是传统产业，纷纷进行互联网化转型。在“互联网+”的浪潮下，面向多个行业，深挖行业知识详情，构建行业知识库，形成完整的行业知识体系，能有效推动数据应用与价值落地，是产业互联网发展的关键。 　　（5）深度标签是大数据挖掘的核心技术之一 　　数据挖掘越来越多地应用到各个行业应用领域，使用数据挖掘技术而打造用户深度标签，已经逐渐成为大数据挖掘的热点。通过针对大数据场景的数据挖掘，深入分析用户行为，打造多层次、多角度的用户深度标签。深度标签是大数据挖掘的核心技术之一，它使得大数据应用更加精准，业务能够更加贴近用户，更好地满足用户的需求[3]。 　　2 灯塔大数据行业应用平台 　　总体架构 　　在大数据的发展浪