PostgreSQL-GreenPlum外部数据源读写编程接口分析.pdfVIP

PostgreSQL/GreenPlum外部数据源 读写编程接口分析 阿里云 2016 年象行中国（上海站） Postgres Conference China 2015 中国用户大会 提纲 • 简介 • PG FDW • GP external table • 实现比较 • 总结 2016 年象行中国（上海站） Postgres Conference China 2015 中国用户大会 PG FDW FDW 类型 说明 odbc_fdw 通用型 jdbc_fdw 通用型 postgres_fdw 专用型 能下压条件，下压JOIN mysql_fdw 专用型 www_fdw 专用型 http 协议装载数据 hdfs_fdw 专用型 s3_fdw 专用型 对接aws S3 oss_fdw 专用型 对接阿里云oss Postgres Conference China 2015 中国用户大会 2016 年象行中国（上海站） PG FDW • Foreign Data Wrappers • 外部数据源接入postgresql 的可编程接口 • C/C++ • 动态装载到内核 2016 年象行中国（上海站） Postgres Conference China 2015 中国用户大会 PG FDW • # 创建插件 • create extension oss_fdw; • # 创建server • CREATE SERVER ossserver FOREIGN DATA WRAPPER oss_fdw; 2016 年象行中国（上海站） Postgres Conference China 2015 中国用户大会 PG FDW • # 创建oss 外部表 • CREATE FOREIGN TABLE ossexample • (date text, time text, open float, • high float, low float, volume int) • SERVER ossserver • OPTIONS ( filepath osstest/example.csv, delimiter , , • format csv, encoding utf8, • host , • id xxx, key xxx,bucket mybucket, • PARSE_ERRORS 100); 2016 年象行中国（上海站） Postgres Conference China 2015 中国用户大会 PG FDW • 一扫描类接口 – 1. GetForeignRelSize_function GetForeignRelSize; – 返回给数据库对应数据源的规模信息 – 2. GetForeignPaths_function GetForeignPaths; – 优化器接口，提供对应数据源的查询路径。 – 3. GetForeignPlan_function GetForeignPlan; – 优化器接口，提供对应数据源的查询计划。 – 4. BeginForeignScan_function BeginForeignScan; – 执行器接口，外部表扫描开始的准备工作。 2016 年象行中国（上海站） Postgres Conference China 2015 中国用户大会