分布式数据库---以HBase为例.pptVIP

* * * * * * * * * * * 1、快速的元组定位---以DNS数据库为例 需求：查找173.x.x.x的IP地址和域名 为什么HBase高吞吐率？ IP地址 域名 localhost 0 ...... ...... 08 ...... ...... RDBMS IP地址 域名 1 0 ...... ...... IP地址 域名 09 08 ...... ...... HBase HRegion 1 HRegion k IP地址 域名 localhost 0 ...... ...... 08 ...... ...... RDBMS ...... 按元组插入顺序组织，没有索引的话需遍历 默认按字母表序组织，自动分表 2、属性（列）的读/写机制--- 以基因组数据库为例：需要编号第400至500的 基因序列（所有样本） 为什么HBase高吞吐率？ seq400 seq401 GCTAA ... ... ... GCTAC ... seq500 seq501 ACCCG ... ... ... GCAGC ... HRegion 200 RDBMS HBase HRegion 250 GS_ID seg0 ... seg400 ... seg500 ... 0 ACCGT ... GCTAA ... ACCCG ... ... ... ... ... ... ... ... 100000 AGGGT ... GCTAC ... GCAGC ... ...... 按行存储，大批、高维的数据导致性能瓶颈 按列存储，HRegion定位，列并发I/O Part 4 --- HBase的操作 DDL操作 DML操作 API访问 应用距离 HBase与RDBMS的对比 HBASE操作 本节以创建一个个人信息表为例子来讲解如何使用DDL操作、DML操作和API来创建、修改、删除和查询表。前两项操作都是在hbase shell中进行操作： 使用个人信息为列演示HBase的用法。创建一个user表，其结构如表所示： 这里address和info对于表来说是一个有三个列的列族：address列族由三个列contry、province和city组成；info列族由三个列age、birthday和company组成。当然可以根据需要在address和info中建立更多的列族，如name、telephone等相应的列族加入info列族。 HBASE操作——DDL操作 DDL(Data Definition Language)是数据库模式定义语言，是用于描述数据库中要存储的现实世界实体的语言，本节内容将执行关于Hbase的DDL操作，包括：数据库表的建立、查看所有表、查表结构、删除列族、删除表等操作。 1. 创建一个表成员： 2.查看表结构： 3.删除一个列族：分为三步：1.disable表2.alter表3.enable表 create user,user_id,address,info describe user disable user‘ alter user,{NAME=user_id,METHOD=delete} enable user  4.删除表：1.disable表 2.drop表 5.查询表是否存在： 6.判断表是否enable或disable disable ‘user‘ drop ‘user’ exists user is_enabled user‘ is_disabled user HBASE操作——DML操作 DML（Data Manipulation Language）是数据操纵语言，用户通过它可以实现对数据库的基本操作。例如，对表中数据的查询、插入、删除和修改。 在DML中，应用程序可以对数据库作插，删，改，排，检等五种操作。本节将针对Hbase数据库执行如下DML操作，包括：添加记录、查看记录、查看表中的记录总数，删除记录、删除一张表、查看某个列族的所有记录等。 HBase Shell基本操作命令如表所示：  1.向表中插入数据 语法：put table,rowkey,family:column,value,timestamp 例如：给表user的添加一行记录：rowkey是andieguo，family:column是info:age，value是27，timestamp：系统默认 2.获取一条记录 1）获取一个ID的所有记录 语法：get table,rowkey,[family:column,....] 例如：查询table为user，rowkey为andieguo下的所有记录 2）获取一个ID的一个列族的所有数据 语法：get table