大数据技术简介.docxVIP

龙源期刊网HYPERLINK/ 大数据技术简介 作者：段鹏松 来源：《中学生数理化·自主招生》2019年第09期 当前，大数据是个很热的词，各种大数据分析工具也时常出现，让人感觉非常时髦。那么，大数据究竟是什么？目前的研究进展如何？对普通人的生活有何影响？本文将围绕这些问题展开介绍。 一、什么是大数据 人类的一切语言文字、图形图画、音像记录等，所有感官可以察觉到的事物，只要能被记下来，能够查询到，都可以称为数据（data）。大数据也是数据，但又不同于一般的数据。一般来说，大数据除了一般数据的特征，还具有体量巨大、处理速度快、数据类型多样和潜在价值高这四个特征。 体量1巨.大。体量巨大指的是大数据包含的数据数量非常多，占用的存储空间较大。以平 时接触较多的手机流量来说，常见统计单位为kB、MB和GB等。这些统计单位之间的关系为1GB=1024MB，1MB=1024kB。就目前的技术而言，要成为大数据，存储至少达到TB级别以上，而1TB=1024GB。但要注意，如果只是体量巨大，而结构单一，也不能称为大数据。 处理2速.度快。实际生活中，数据量可能会随着时间的积累而不断增长，也可能随着空间 的变化而不断变化。数据都具有一定的时效性，如果采集到的数据不能得到及时处理，最终会过期作废，失去应用的价值。对于海量的数据，如果能在有效时间内完成处理，则可以称为大数据;反之，则不能称之为大数据。 数据3类.型多样。作为大数据，其包含的数据类型可能是多种多样的，并不仅仅局限于一 种数据类型。目前，文字、图片、语音、图像，一切在网络上可以传输和显示的信息，都可以属于大数据的范畴。从结构上来说，当前的大数据主要指半结构化和非结构化的信息，如网站的各种日志文件、发布的音视频文件等。 潜在4价.值高。大数据应用的最终目的是通过挖掘和分析，发现趋势或规律，进而指导实 际工作。如果数据本身是毫无规律的，不能对实际工作行程进行指导，则不能称为大数据。尽管大数据的潜在价值高，但由于数据量巨大，所以价值密度低，要通过大量分析才能实现从数据到价值的转变。 二、大数据典型案例