PostgreSQL存儲系统.pptVIP

PostgreSQL存储系统 报告人：王晓方 2009/5/14 Outline 数据库文件布局 数据库分页文件 TOAST PG索引 日志及事务恢复 文件布局 数据库集群所需要的所有数据都存储在集群的数据目录里，通常用 PGDATA 来引用，PGDATA的内容 如下表： 项 描述 PG_VERSION 一个包含 PostgreSQL 主版本号的文件 base 该目录包含每个数据库对应的子目录 (存储该数据库的系统表及其他数据文件) global 该目录包含集群范围的表，比如pg_database pg_clog 该目录包含事务提交状态数据 pg_subtrans 该目录包含子事务状态数据 pg_tblspc 该目录包含指向表空间的符号链接 pg_xlog 该目录包含 WAL （预写日志）文件 postmaster.opts 该文件记录 postmaster 最后一次启动时使用的命令行参数 postmaster.pid 一个锁文件，记录着当前的 postmaster PID 和共享内存段 ID （在 postmaster 关闭之后不存在） 文件布局 每个表和索引都存储在独立的文件里，以该表或者该索引的 filenode 号命名。 在表或者索引超过 1Gb 之后，它就被分裂成一G大小的段。第一个段的文件名和 filenode 相同；随后的段名为 filenode.1，filenode.2，等等。 一个表如果有些字段里面可能存储相当大的数据，那么就会有个相关联的 TOAST 表，用于存储无法在表的数据行中放下的太大的线外数据。 return 分页文件总体页面布局 PageHeaderData ItemPointerData Free space Free space Special Space Items Items Items Items Items Free space Free space ItemPointerData 分页文件PageHeaderData 布局 字段 类型 长度 描述 pd_lsn XLogRecPtr 8 字节 LSN: 最后修改这个页面的 xlog 记录最后一个字节后面第一个字节 pd_tli TimeLineID 4 字节 最后修改的 TLI pd_lower LocationIndex 2 字节 到自由空间开头的偏移量 pd_upper LocationIndex 2 字节 到自由空间结尾的偏移量 pd_special LocationIndex 2 字节 到特殊空间开头的偏移量 pd_pagesize_version uint16 2 字节 页面大小和布局版本号信息 分页文件HeapTupleHeaderData 布局 字段 类型 长度 描述 t_xmin TransactionId 4 字节 插入 XID 戳记 t_cmin CommandId 4 字节 插入 CID 戳记 t_xmax TransactionId 4 字节 删除 XID 戳记 t_cmax CommandId 4 字节 删除 CID 戳记（与 t_xvac 重叠） t_xvac TransactionId 4 字节 用于移动行版本操作的 VACUUM 的 XID t_ctid ItemPointerData 6 字节 这个或者新行的当前 ID t_natts int16 2 字节 字段数目 t_infomask uint16 2 字节 各种标志位 t_hoff uint8 1 字节 到用户数据的偏移量 分页文件TOAST 因为PostgreSQL的页面大小是固定的（通常是8Kb），并且不允许元组跨越多个页面，因此不可能直接存储非常大的字段值。解决方法是允许大的字段值被压缩和/或打碎成多个物理行。 TOAST　使用变长的长度字的最高两个二进制位作为标识位：一位表示是否被压缩；另一位表示该数值是否在线外存储（这个时候，该值剩下的部分只是一个指针，而正确的数值必须在其他地方查找）。 如果一个表中有任何一个字段是可以TOAST的，那么该表将有一个关联的TOAST表，其 OID 存储在表的pg_class.reltoastrelid 记录里。 TOAST 过的属性的大的数值只是在把结果集发送给客户端的时候才抽出来（如果选择了它的话）。因此，主表要小得多，并且它的大部分行都存储在共享缓冲区里，因此就可以不需要任何线外存储。排序集也缩小了，排序将更多地在内存里完成。 return PG索引类型 B-tree 可以处理那些可以按照某种顺序存储的数据的等于比较和范围查询。 R-tree用于处理多维数据上的索引。 散列（hash）索引只能处理简单的等于比较。 GiST 索引不是单独一种索引类型，而是一种架构，可以在这