高校大数据平台设计与实践.PDFVIP

高校大数据平台设计与实践 王永坤 上海交通大学网络信息中心 数据平台 数据的导入、存储、处理、分析、共享于一体的软 件和硬件平台。 数据平台现状– 百花齐放 硬件 • 厂商提供可定制的硬件以及参考配置 • Open Compute Project也提供大公司等的硬件设计 软件 • 丰富的开源解决方案，Hadoop，Spark，…… • 活跃的开源社区 平台方案 • 企业平台提供商：Cloudera，Hortonworks，星环等 云方案 • AWS, Google Cloud Big Data Products, Microsoft Azure Hadoop • 阿里云大数据服务ODPS 、天池、及数加；腾讯大数据；百度大 数据+ 已有数据平台的挑战 成本 配置灵活性 知识产权问题 数据共享安全问题 我们的目标 完