《图书馆信息技术进展与趋势-20121023-OKOK.pptVIP

* * * 2010年，超过40亿人（世界人口的60%）在使用手机，其中大约12%拥有智能电话——其渗透率以每年20%以上的速度增长。如今，3000多万联网传感器节点分布在交通、汽车、工业、公用事业和零售部门，其数量正以每年30%以上的速度增长。 * * * * * BIG DATA ? BIG COMPUTATION ? BIG ANALYTICS ? BIG (SOCIETAL) IMPACT * KB ? MB ? GB ? TB ? PB ? EB ? ZB ? YB Hadoop—大数据分布处理软件框架， NoSQL-是当今非关系型数据库的宠儿 目前的成功案例主要集中在互联网应用中：数据模型简单，数据量大，一致性和事物要求低，响应体验要求高 Hadoop是一套开源的、基础是Java的、目前能够让数千台普通、廉价的服务器组成一个稳定的、强大的集群，使其能够对pb级别的大数据进行存储、计算。已经具有了强大稳定的生态系统，也具有很多使用的延伸产品。比如做查询的Pig, 做分布式命名服务的ZooKeeper, 做数据库的Hive等等。 Hadoop现在保持了很多漂亮的记录： 存储：现在世界上最大的Hadoop集群目前在Facebook，可以存储30PB的数据 计算：Hadoop是目前Terasort记录的保持者（参见：/)，Terasort是给出1TB的随机数据，看谁能够在