大数据技术基础-厦门大学数据库试验室.pdf

厦门大学计算机科学系研究生课程 获取教材和讲义PPT 等各种课程资料请访问/node/422 =课程教材由林子雨老师根据网络资料编著= =从数据库研究人员的角度阐述大数据技术= 《大数据技术基础》 （版本号：2013 年12 月13 日第一版） 厦门大学计算机科学系教师 林子雨 编著 /linziyu 2013 年9 月 前言 本教程由厦门大学计算机科学系教师林子雨编著，可以作为计算机专业研究生课程《大 数据技术基础》的辅助教材。 本教程共13 章，内容包括：第1 章 大数据概述、第2 章 大数据关键技术与挑战、第 3 章 Hadoop、第4 章 MapReduce、第5 章 HDFS、第6 章 Zookeeper 、第7 章 HBase、第8 章 流计算、第9 章 图计算、第10 章 NoSQL 数据库、第11 章 云数据库、第12 章 Google Spanner 和第13 章 Google Dremel 。 本教程由林子雨老师团队合力完成，编写工作分工如下：林子雨负责编写第1 章、第2 章、第3 章、第4 章、第5 章、第6 章、第7 章、第10 章、第11 章和第12 章；蔡珉星负 责编写第8 章，李雨倩负责编写第9 章，叶林宝负责编写第13 章。 本教程是林子雨通过大量阅读、收集、整理各种资料后精心制作的学习材料，与广大数 据库爱好者共享，仅做学术交流之用，请读者不要将此教程用于商业用途。教程中的内容大 部分来自网络资料和书籍，一部分是自己撰写。对于自写内容，林子雨老师拥有著作权。感 谢林子雨老师团队的多位同学的大量协助工作，包括厦门大学计算机科学系2011 级研究生 赖明星同学、2012 级研究生刘颖杰和叶林宝同学、2013 级研究生蔡珉星、李雨倩同学，他 们为本教程的撰写做了大量积极的贡献，包括资料收集、整理、讲义PPT 制作等。 本教程PDF 文档及其全套教学PPT 可以通过网络免费下载和使用（下载地址： /node/422 ）。教程中可能存在一些问题，欢迎读者提出宝贵意见和建 议！ 本教程已经应用于厦门大学计算机科学系研究生课程《大数据技术基础》，欢迎访问 2013 班级网站/node/423。 林子雨的E-mail 是：ziyulin@ 。 林子雨的个人主页是：/linziyu。 林子雨于厦门大学海韵园 2013 年9 月 《大数据技术基础》林子雨 编著 目录 目 录 第1 章 大数据概述1 1.1 大数据概念1 1.2 大数据的产生和应用4 1.3 大数据作用5 1.4 大数据与大规模数据、海量数据的差别6 1.5 典型的大数据应用实例7 1.5.1 从谷歌流感趋势看大数据的应用价值7 1.5.2 大数据在医疗行业的应用8 1.5.3 大数据在能源行业的应用8 1.5.4 大数据在通信行业的应用8 1.5.5 大数据在零售业的应用9 1.6 从数据库到大数据9 1.7 大数据与云计算11 1.8 大数据与物联网13 1.9 对大数据的错误认识14 1.10