大数据定义特征及其应用分析.docVIP

大数据定义特征及其应用分析 　　摘 要 随着互联网的迅猛发展，大数据时代已然来临。本文对大数据的定义和特征进行了总结，并分析了其发展对社会产生的影响和在通信行业中的应用。 　　关键词 大数据；云计算；通信运营商 　　中图分类号：TG335 文献标识码：A 文章编号：1671-7597（2013）11-0000-00 　　1 大数据产生背景 　　随着网络信息化时代的日益普遍，互联网、物联网、云计算的飞速发展以及各种类型的移动智能终端应用普及，互联网的边界和应用范围得到了极大地拓展，互联网（搜索、社交、电商）、移动互联（微博、微信、翼聊）、物联网（传感器、智慧地球）、电信行业（通话、上网、短信）等都在疯狂地产生着数据，促使当前人类社会的数据增长比以往任何一个时期都要快。据有关公司统计，在2006年，个人用户数据量刚刚迈进TB时代，全球一共新产生了约180EB的数据，到了2010年年底，全球数据量已经达到了1.14ZB。预计到2020年，全球电子设备存储的数据量将会达到35ZB，这个数据量是2006年全球电子数据存储量的20多万倍，这其中企业数据正在以55%的速度逐年增长。随着数据量越来越大、数据变化速度越来越快、数据类型越来越复杂、数据特性的逐步演变和发展，基于海量信息数据处理需求等诸多因素，诞生了一个全新的概念——大数据。 　　2 大数据定义和特征 　　大数据（Big Data），或称巨量资料，指的是所涉及的数据量规模庞大到无法通过目前主流软件工具，在可以容忍的时间内对其进行抓取、管理、处理的数据集合。它的数据规模和转输速度要求都很高，一般单个数据集在10TB左右，其结构不适合原本的数据库系统。大数据同过去的海量数据有所区别，其基本特征可以用4个V来总结：Volume、Variety、Value和Velocity 即数据规模大、种类繁多、价值密度低、处理速度快。1）数据规模大，数据量从TB级别跃升到PB级别。2、数据类型繁多，现在的数据不仅是文本形式，更多的是视频、音频、图片、地理位置信息多类型的数据。3）价值密度低，价值密度高低与数据总量成反比。以网络视频为例，1小时的视频，可能其中只有一分钟甚至几秒钟的数据有价值。4）处理速度快，数据处理??循“1秒定律”，可以从各类型数据中快速获得高价值信息，这是大数据区分于传统数据挖掘最显著的特征。 　　3 大数据的发展及应用 　　大数据并非新生事物，它在物理学、天文学、生物学、环境生态学、自动控制等科学领域，以及军事、通讯、金融等行业已存在多年。近年来，随着互联网行业的卓越发展，大数据越来越受到人们的关注。大数据技术的战略意义不在于仅仅掌握庞大的数据信息，而在与对这些含有意义的数据进行专业化处理。如果把大数据比作一座蕴含巨大价值的宝藏，那么云计算则是挖掘宝藏的利器。云计算（cloud computing）的核心是业务模式，本质是数据处理技术，是为用户提供无限计算资源的商业服务，为了解决大数据等“大”问题发展而来的技术趋势，没有大数据的需求，云计算的功用也得不到完全发挥，两者结合在一起相得益彰，互相都能发挥最大的优势。2012年初，《纽约时报》一篇专栏中宣告“大数据时代”已经到来。大数据正在对政治、经济、贸易等各个领域都造成影响，越来越多的决策行为将逐渐依赖于对数据的收集和梳理分析而做出，基于经验和直觉的判断将被质疑。而在公共卫生、经济发展和经济预测等领域中，大数据的预见能力也已崭露头角。大数据对于国家和政府也表现出不凡的力量，通过大数据分析技术，使得数据采集、分析和处理的效率大幅提高，有效地降低了政府成本。通过大数据推进政府信息资源进一步开放，政府信息资源的公开透明，有利于建立公众和政府的沟通渠道，政府能够广泛倾听民意，及时化解一些社会矛盾。公众也可以通过该渠道及时了解并参与制定政府决策。大数据与云计算相结合所表现出的巨大能量，将惠及到各行各业，特别是通信行业，在传统话音业务持续走低、各类增值业务逐渐网络化的趋势中，大数据与云计算技术的结合将为通信行业提供加速转型的动力，主要体现在以下几方面：1）提升网络服务质量，增强管道智能化。通信行业拥有着海量的用户使用行为数据，例如呼叫记录、上网使用记录等等，这需要海量的存储空间，大数据拥有海量分布式存储技术，恰好可以满足这方面的存储需求。结合云计算技术，对用户使用数据进行挖掘分析，为通信网络优化提供技术参考，从而提高通信网络服务质量，提升用户感知。2）更加精准地挖掘出客户需求，提升企业自身生存、竞争力。通过使用大数据分析，发现更多有关客户和企业的关系，预测未来的客户行为，从不同角度了解客户，制定合理的营销策略，提升客户忠诚度，加强企业竞争力。3）提供基于“云”的数据分析服务，大数据和云计算相结合，使得数据分析也可以作为一种服