大数据的四大特点.docxVIP

PAGE 1 PAGE 1 大数据的四大特点  随着大数据连续渗透到我们的日常生活中，围绕大数据的炒作正在转向实际使用中的真正价值。  说起大数据，估计大家都觉得只听过概念，但是详细是什么东西，怎么定义，没有一个标准的东西，因为在我们的印象中似乎许多公司都叫大数据公司，业务形态则有几百种，感觉不是很好理解，所以我建议还是从字面上来理解大数据，在维克托迈尔-舍恩伯格及肯尼斯库克耶编写的《大数据时代》提到了大数据的4个特征：  1.大量  大数据的特征首先就体现为“大”，从先Map3时代，一个小小的MB级别的Map3就可以满意许多人的需求，然而随着时间的推移，存储单位从过去的GB到TB，乃至现在的PB、EB级别。只有数据体量达到了PB级别以上，才能被称为大数据。1PB等于1024TB，1TB等于1024G，那么1PB等于1024*1024个G的数据。随着信息技术的高速发展，数据开始爆发性增长。社交网络(微博、推特、脸书)、移动网络、各种智能工具，服务工具等，都成为数据的来源。淘宝网近4亿的会员每天产生的商品交易数据约20TB;脸书约10亿的用户每天产生的日志数据超过300TB。迫切需要智能的算法、强大的数据处理平台和新的数据处理技术，来统计、分析、预估和实时处理如此大规模的数据。  2.高速  就是通过算法对数据的规律处理速度特别快，1秒定律，可从各种类型的数据中快速获得高价值的信息，这一点也是和传统的数据挖掘技术有着本质的不同。大数据的产生特别快速，主要通过互联网传输。生活中每个人都离不开互联网，也就是说每天个人每天都在向大数据供应大量的资料。并且这些数据是需要准时处理的，因为花费大量资本去存储作用较小的历史数据是特别不划算的，对于一个平台而言，或许保存的数据只有过去几天或者一个月之内，再远的数据就要准时清理，不然代价太大。基于这种状况，大数据对处理速度有特别严格的要求，服务器中大量的资源都用于处理和计算数据，许多平台都需要做到实时分析。数据无时无刻不在产生，谁的速度更快，谁就有优势。  3.多样  假如只有单一的数据，那么这些数据就没有了价值，比如只有单一的个人数据，或者单一的用户提交数据，这些数据还不能称为大数据。广泛的数据来源，打算了大数据形式的多样性。比如当前的上网用户中，年龄，学历，爱好，性格等等每个人的特征都不一样，这个也就是大数据的多样性，当然了假如扩展到全国，那么数据的多样性会更强，每个地区，每个时间段，都会存在各种各样的数据多样性。任何形式的数据都可以产生作用，目前应用最广泛的就是推荐系统，如淘宝，网易云音乐、今日头条等，这些平台都会通过对用户的日志数据进行分析，从而进一步推荐用户喜欢的东西。日志数据是结构化明显的数据，还有一些数据结构化不明显，例如图片、音频、视频等，这些数据因果关系弱，就需要人工对其进行标注。  4.价值  这也是大数据的核心特征。现实世界所产生的数据中，有价值的数据所占比例很小。相比于传统的小数据，大数据最大的价值在于通过从大量不相关的各种类型的数据中，挖掘出对将来趋势与模式预估分析有价值的数据，并通过机器学习方法、人工智能方法或数据挖掘方法深度分析，发觉新规律和新学问。你假如有1PB以上的全国全部20-35年轻人的上网数据的时候，那么它自然就有了商业价值，比如通过分析这些数据，我们就知道这些人的爱好，进而指导产品的发展方向等等。假如有了全国几百万病人的数据，依据这些数据进行分析就能预估疾病的发生，这些都是大数据的价值。大数据运用之广泛，如运用于农业、金融、医疗等各个领域，从而最终达到改善社会治理、提高生产效率、推进科学研究的效果。  大数据已经成为过去几年中大部分行业的游玩规则，行业领袖，学者和其他知名的利益相关者都同意这一点，随着大数据连续渗透到我们的日常生活中，围绕大数据的炒作正在转向实际使用中的真正价值。