大数据系统架构及技术发展研究.PDF

第 卷第 期 石家庄学院学报 17 6 Vol.17袁No.6 年 月 2015 11 Journal of Shijiazhuang University Nov.2015 大数据系统架构及技术发展研究 曾凌静 福建船政交通职业学院 信息工程系 福建 福州 渊 袁 350007冤 摘 要 近几年技术的进步使得许多领域 如医疗保健传感器 客户端 互联网和金融企业 以 院 渊 尧 尧 尧 及商业系统 产生了海量数据 相比传统数据 除了其庞大的数据量 大数据也表现出其他特性 例 冤 . 袁 袁 . 如 大的数据通常是非结构化的 需要更精确的实时分析 这意味着需要新的系统架构对数据进行 袁 袁 . 采集 传输 存储以及大规模数据处理的机制 提出了大数据的定义和未来大数据面临的挑战 将 尧 尧 . 袁 大数据系统分为四个连续的模块 即数据生成 数据获取 数据存储和数据分析 这四个模块可以形 袁 尧 尧 袁 成大数据的价值链 对研究和产业机构提出的许多方法进行了分析和总结并列出了一些大数据系. 统潜在的研究方向. 关键字 云计算 数据生成 数据获取 数据存储 数据分析 院 曰 曰 曰 曰 中图分类号院TP301 文献标识码院A 文章编号院1673-1972渊2015冤06-0038-06 新兴的大数据 由于其广泛的影响 已经深刻地改变着我们的社会 未来将继续吸引来自技术专家和公 袁 袁 袁 众的普遍关注 很明显 随着数据量呈几何式的增长 我们正生活在海量数据的时代 例如 一个 报告[1] . 袁 袁 . 袁 IDC 预测 年 全球数据量将从 艾字节 相当于每两年就有两位数的增长 又如 袁2005-2020 袁 130-40000 袁 袁 袁Mckinsey [2] 的报告 指出 预计全球个人定位数据的潜在价值为 亿美元 在未来的十年 服务提供商的消费者和终 袁 1000 袁 袁 端用户的数据价值将会高达 亿美元 大数据 的趋势已经越来越明显 事实上 大数据已从方方面面 7000 . 野 冶 . 袁 改变着我们的社会 例如