大数据处理技术简介37 .pptxVIP

  • 5
  • 0
  • 约9.2千字
  • 约 38页
  • 2021-03-02 发布于江苏
  • 举报
大数据处理技术简介1342概念及背景介绍大数据处理相关工具介绍国内相关数据处理平台简介Storm实时计算系统简介大数据概念1、指的是所涉及的资料量规模巨大到无法通过目前主流软件工具,在合理的时间内达到撷取、管理、处理并整理成为帮助企业经营决策更积极目的的咨询。2、维克托·迈尔-舍恩伯格以及肯尼斯·库克耶编写的《大数据时代》中大数据指不用随机分析法(抽样调查)这样的捷径,而采用所有数据进行分析处理。3、海量异构的数据(包括文本、图像、声音等)。大数据的4V特点:Volume(大量)、Velocity(高速)、Variety(多样)、Value(价值)大数据处理技术的应用 近年来,一种新的数据密集型应用已经得到了广泛的认同,这些应用的实例包括:网络监控、电信数据管理、Web应用、传感检测等等。在这种数据流模型中,数据以大量、快速、时变(可能是不可预知)的数据流持续到达,如何对海量瞬时流动数据建模并处理,产生了一些新的基础性研究问题。大数据应用情景一(B2C、C2C与金融):淘宝、股票等即时交易数据截至2011年11月,淘宝Beltles平台单日最大服务调用量19亿。今年淘宝双11 QPS:32万/分钟2009年四月统计:上证交易所新一代交易系统峰值订单处理能力约80000笔/秒,平均订单时延比现用交易系统缩短30%以上,系统日双边成交容量不低于1.2亿笔/日,相当于单市场1.2万亿的日

文档评论(0)

1亿VIP精品文档

相关文档