TAIR资料.docxVIP

TAIR Tair是一个高性能，分布式，可扩展，高可靠的key/value结构存储系统。Tair提供两种存储方式：非持久，相当于cachemdb引擎: 支持key/value，prefix，单机性能30w qps（测试条件：单条记录200字节，响应时间2ms内）rdb引擎: 不仅支持key/value，还支持list/hashmap/set/sortedset等复杂数据结构。持久化存储，类似数据库。数据直接存放进硬盘，并且至少会有两份。ldb引擎：采用了leveldb做为引擎，并且自带cache。服务器采用了ssd，性能在5w qps以上。Leveldb是一个google实现的非常高效的kv数据库，目前的版本1.2能够支持billion级别的数据量了。 在这个数量级别下还有着非常高的性能，主要归功于它的良好的设计。LevelDb性能非常突出，官方网站报道其随机写性能达到40万条记录每秒，而随机读性能达到6万条记录每秒。总体来说，LevelDb的写操作要大大快于读操作，而顺序读写操作则大大快于随机读写操作。写快速的原因是，先写commit log，此时这个是buffer io，宕机也会有数据丢失。Tair现在支持Java和C/C++版本的客户端。Tair架构：tair 作为一个分布式系统, 是由一个中心控制节点和一系列的服务节点组成. 我们称中心控制节点为config server. 服务节点是data server. config server 负责管理所有的data server, 维护data server的状态信息. data server 对外提供各种数据服务, 并以心跳的形式将自身状况汇报给config server. config server是控制点, 而且是单点, 目前采用一主一备的形式来保证其可靠性. 所有的 data server 地位都是等价的.tair 的server端是C++写的, 因为server和客户端之间使用socket通信, 理论上只要可以实现socket操作的语言都可以直接实现成tair客户端. 目前实际提供的客户端有java 和 C++. 客户端只需要知道config server的位置信息就可以享受tair集群提供的服务了.Tair缓存使用的场景数据可以以key/value的形式存储数据可以接受丢失访问速度要求很高单个数据大小不是很大，一般在KB级别数据量很大，并且有较大的增长可能性数据更新不频繁Tair持久化适用的场景数据可以以key/value的形式存储数据需要持久化数据量很大，并且有较大的增长可能性单个数据大小不是很大，一般在KB级别数据的读写比例较高Tair不适用的场景对数据有查询需求，比如对key的模糊查询，或者根据value反查询key等单条数据很大读写比例很低【基本概念和知识相关 】group_name指的是什么？tair集群由configserver管理，configserver可以管理多个集群，为了将集群区分，引入了group概念，一个group对应一个集群，group_name用于配置所使用的集群。?什么是area？什么是namespace？?area是在tair中分配给应用的一个区域，可以认为应用的数据存在自己的area中。 同一group中area是唯一的。namespace是area的马甲称呼，二者等同。什么是配额（quota）？?配额是每个area对应的储存区的大小的限制，超过配额后数据将面临最近最少使用（LRU）的淘汰。持久化引擎（ldb/kdb）本身没有配额，ldb由于自带了cache，所以也可以设置cache的配额怎么预估该申请多大配额？记录条数 * 单条记录大小管理员怎么配置配额？如果集群备份是单份的，则按业务预估出来的数据配置即可。如果备份是2，那么在配置的时候需要将quota * 2什么是expiredTime？expiredTime 是指数据的过期时间，当超过过期时间之后，数据将对应用不可见。不同的存储引擎有不同的策略清理掉过期的数据。调用接口时，expiredTime单位是秒，可以是相对时间（比如：30s），也可以是绝对时间（比如：当天23时,转换成距1970-1-1 00:00:00的秒数） 。如果不传或者传入0，则表示数据永不过期；大于0小于当前时间戳是相对时间过期，大于当前时间戳是绝对时间过期。什么是version？?version有什么用？在Tair的put接口中，有一个version参数，这个参数是为了解决并发更新同一个数据而设置的。 很多情况下，更新数据是先get，修改get回来的数据，然后put回系统。如果有多个客户端get到同一份数据，都对其修改并保存，那么先保存的修改就会被后到达的修改覆盖，从而导致数据丢失问题,在有些情况下，