大数据关键技术.pdfVIP

大数据关键技术

大数据技术，就是从各种类型的数据中快速获得有价值信息的技

术。大数据领域已经涌出了大量新的技术，它们成为大数据采集、

存储、处理和呈的有力武器。

大数据处理关键技术一般包括：大数据采集、大数据预处理、大

数据存储及管理、大数据分析及挖掘、大数据展和应用（大数据检

索、大数据可视化、大数据应用、大数据安全等）。

0

一、大数据采集技术

数据是指通过RFID射频数据、传感器数据、社交网络交互数据及

移动互联网数据等方式获得的各种类型的结构化、半结构化（或称之

为弱结构化）及非结构化的海量数据，是大数据知识服务模型的根本。

重点要突破分布式高速高可靠数据爬取或采集、高速数据全映

像等大数据收集技术；突破高速数据解析、转换与装载等大数

据整合技术