英特尔hadoop解决方案介绍.pdfVIP

英特尔Hadoop解决方案介绍 英特尔亚太研发有限公司 海量数据应用发展趋势 2 2012/6/18 海量数据的时代正在到来 巨大的数据量 • IDC预测全球的数据使用量到2020年会增长44倍，达到35.2ZB (1ZB = 10亿TB) – 宽带普及和提速(直接导致访问量、网络访问日志、通讯记录等迅猛增加) – 社交网络(Facebook, Twitter, 微博等) – 视频(视频通讯、医疗影像、地理信息、监控录像等) – 移动网络和各种智能终端 – 传感器、RFID阅读器、导航终端等非传统IT设备 数据集特点 • 超过80%的数据是非结构化的 • 数据量在持续增加 • 数据需要长时间存储，非热点数据也会被随机访问 传统技术无法胜任大数据集的分析、管理和挖掘 • 传统关系数据库以及一些桌面BI分析软件处理的结构化数据在GB级别，无法从更大的数据集 中发现有意义的信息。 • 需要处理的目标数据量一直在增长，传统技术无法适应这种扩展性 3 2012/6/18 什么应用适合大数据产品方案