大数据处理关键技术.pdf

大数据处理关键技术 在大数据时代，传统的数据处理方法还适用吗？ 大数据环境下的数据处理需求 大数据环境下数据来源非常丰富且数据类型多样，存储和分析挖掘的数据 量庞大，对数据展现的要求较高，并且很看重数据处理的高效性和可用性。 传统数据处理方法的不足 传统的数据采集来源单一，且存储、管理和分析数据量也相对较小，大多 采用关系型数据库和并行数据仓库即可处理。对依靠并行计算提升数据处 理速度方面而言，传统的并行数据库技术追求高度一致性和容错性，根据 CAP理论，难以保证其可用性和扩展性。 传统的数据处理方法是以处理器为中