Bigdata-ShuaiMa-北京航空航天大学.PDF

浅谈大数据及其相关技术 马 帅 个人简介 • 北京航空航天大学计算机学院教授、博士生导师；中国计算 机学会数据库专业委员会委员，大数据专家委员会委员。 • 2011年作为海外优秀中青年人才加入北京航空航天大学计算 机学院软件开发环境国家重点实验，并特聘为教授。 • 获得了北京大学(2004)和英国爱丁堡大学(2011)的两个博士 学位。英国爱丁堡大学博士后，并曾在美国贝尔实验室总部 实习，在微软亚洲研究院访问。 Homepage: Email: mashuai@ Address : Room G1122, New Main Building, Beihang University 北京大数据科学与脑机智能高精尖创新中心 • 坐落于北京航空航天大学，2016年1月17启动大会 • 北京教委-北京高等学校高精尖创新中心建设计划 – 首批认定了13个北京高校高精尖创新中心，未来建设20个 左右高精尖中心。 – 每个创新中心每年都会有5000万元至一亿元的财政拨款， 至少7成经费用于整合国内外创新人才，至少两成聘任费 需用于京外人才。 北航大数据科学与工程国际联合研究中心 • International Research Centre on Big Data (RCBD) • Founded in September, 2012. •Led by Prof. Wenfei Fan (ACM Fellow, Fellow of the Royal Society of Edinburgh, Scotland) . • Research Topics • Big Data Analysis: Theory and Applications • Data Quality: The Other Side of Big Data • Querying Big Data beyond MapReduce • Querying Big Social Data 973 Grant on Big Data at Beihang • 网络信息空间大数据计算的基础研究(2014-2018) – Chief Scientist: Prof. Jinpeng Huai. – 8 institutes involved – Focus on “computing theory and practice on Big Data” – / 提纲 •大数据定义 •大数据溯源 •大数据的应用 •大数据相关技术 6 大数据(维基百科) • [英文定义] Big data is the term for a collection of data sets so large and complex that it becomes difficult to process using on-hand database management tools or traditional data processing applications. • [中文定义]大数据或称巨量数据、海量数据、大资料，指的是所涉 及的数据量规模巨大到无法通过人工，在合理时间内达到截取、 管理、处理、并整理成为人类所能解读的信息[1][2]。 • 在总数据量相同的情况下，与个别分析独立的小型数据集相比， 将各个小型数据集合并后进行分析可得出许多额外的信息和数据 关系性，可用来察觉商业趋势、判定研究质量、避免疾病扩散、 打击犯罪或测定实时交通路况等；这样的用途正是大型数据集盛 行的原因[3][4][5] • [1]Kusnetzky, Dan. What is Big Data?. ZDNet. • [2]Vance, Ashley. Start-Up Goes After Big Data With Hadoop Helper. New York Times Blog. 2010. • [3]Data