预习课件上课前课件会有部分更新飞龙在天hbase.pdf

飞龙在天 ——Hbase @八斗学院 飞龙在天——Hbase O u t L i n e HBase基础 【实践】HBase搭建 【实践】Hbase Shell 【实践】Hbase的Python操作 八斗 — — 八 斗 大 数 据 ， 盗 版 必 究— — 飞龙在天——Hbase H b a s e 定 义 • HBase是一个开源的非关系型分布式数据库 （NoSQL），它 了谷歌的BigTable建模，实现 的编程语言为 J a。 • 是Apache软件 的Hadoop项目的一部分，运行于HDFS文件系统之上，因此可以容错地存 储海量稀疏的数据。 • 特性： – 高可靠 – 高并发读写 – 面向列 – 可伸缩 八斗 – 易构建 — — 八 斗 大 数 据 ， 盗 版 必 究— — 飞龙在天——Hbase 行 存 储 v s 列 存 储 • 行存储： – 优点：写入一次性完成，保持数据完整性 – 缺点：数据读取过程中产生冗余数据，若有少量数据可以忽略 • 列存储 – 优点：读取过程，不会产生冗余数据，特别适合对数据完整性要求不高的大数据领域 – 缺点：写入效率差，保证数据完整性方面差 八斗 — — 八 斗 大 数 据 ， 盗 版 必 究— — 飞龙在天——Hbase H b a s e 优 势 • 海量数据存储 • 快速随机 • 大量写操作的应用。 八斗 — — 八 斗 大 数 据 ， 盗 版 必 究— — 飞龙在天——Hbase H b a s e 应 用 场 景 • 互联网搜索引擎数据存储 • 海量数据写入 • 消息中心 • 内容服务系统（schema-free） • 大表复杂 度索引 • 大批量数据读取 八斗 — — 八 斗 大 数 据 ， 盗 版 必 究— — 飞龙在天——Hbase H b a s e 数 据 模 型 • RowKey：是Byte array，是表中每条记录的“主键”，方便快速查找，Rowkey的设计非常重要。 • Column Family：列族，拥有一个名称(string)，包含一个或者多个相关列 • Column：属于某一个columnfamily，familyName:columnName，每条记录可动态添加 八斗 • Version Number：类型为Long，默认值是系统时间戳，可由用户自定义 • Value(Cell)：Byte array — — 八 斗 大 数 据 ， 盗 版 必 究— — 飞龙在天——Hbase H b a s e 数 据 模 型 八斗 — — 八 斗 大 数 据 ， 盗 版 必 究— — 飞龙在天——Hbase H b a s e 数 据 模 型 三维有序！ 八 • {rowkey = {family = {qualifier = {version = value}}}} • a:cf1:bar:1368394583:7 — — 八 斗 大 数 据 ， 盗 版 必 究— — • a:cf1:foo:1368394261:hello 飞龙在天——Hbase H b a s e 数 据 模 型 Rowkey