《数据实时处理flink》课件——第八章 Table API SQL的介绍和使用.pptVIP

Catalog记录并管理各类元数据信息有哪些数据库（Database）、存储形式为文件、消息队列、数据库数据库中有哪些表有哪些可用的函数一个Catalog下有一到多个Database，一个Database下有一到多个表GenericInMemoryCatalog：将元数据存储在内存，只在一个Session内生效HiveCatalog：可以将元数据持久化，数据管理团队将数据注册到HiveCatalog中，数据分析团队从HiveCatalog中获取表，直接进行计算Catalog使用SQLDDL：CREATETABLE…未来将主要使用这种方式使用TableEnvironment.connect()未来将逐渐废弃从Catalog中获取已注册的表如何获取表USE、SHOWCREATE、DROP、ALTER将SQL语句粘贴到Java代码的executeSql()中执行常见SQLDDL对TableAPISQL综述动态表和持续查询时间和窗口JoinSQLDDL系统内置函数用户自定义函数根据是否为系统内置来分类系统内置函数（SystemFunction）：Flink提供的内置函数非系统内置函数：需要我们注册到某个Catalog中，又被称为目录函数（CatalogFunction）根据是否为临时函数来分类临时函数（TemporaryFunction），只存在于某个FlinkSession中，Session结束后就不可使用。非临时函数，又被称为持久化函数（PersistentFunction），可以是一个系统内置函数，也可以是一个目录函数。函数根据上述维度分为：临时系统内置函数（TemporarySystemFunction）。持久化系统内置函数（SystemFunction）。临时目录函数（TemporaryCatalogFunction）。持久化目录函数（CatalogFunction）。函数分类标量函数逻辑函数数学函数字符串函数时间函数判断函数类型转化函数集合函数聚合函数系统内置函数对TableAPISQL综述动态表和持续查询时间和窗口JoinSQLDDL系统内置函数用户自定义函数当系统内置函数无法满足特定的需求时，可以进行用户自定义函数registerFunction()：将函数名和对应实现记录下来。自定义函数：需要自己实现函数的业务逻辑三种自定义函数：标量函数表函数聚合函数用户自定义函数标量函数接收零个、一个或者多个输入，生成一个单值输出。案例：经纬度，判断给定经纬度数据是否在北京四环以内继承ScalarFunction，实现eval()方法注意eval()方法的输入参数类型和返回结果类型eval()方法的输入和输出类型决定了函数的输入和输出类型标量函数publicclassIsInFourRingextendsScalarFunction{//北京四环经纬度范围privatestaticdoubleLON_EAST=116.48;privatestaticdoubleLON_WEST=116.27;privatestaticdoubleLAT_NORTH=39.988;privatestaticdoubleLAT_SOUTH=39.83;//判断输入的经纬度是否在四环内publicbooleaneval(doublelon,doublelat){return!(lonLON_EAST||lonLON_WEST) !(latLAT_NORTH||latLAT_SOUTH);}}自定义好函数后，还需要使用registerFunction()将函数注册到Catalog中，为函数起名，注册后才能在SQL中使用这个函数eval()方法的输入参数类型对应SQL中的输入类型标量函数//注册函数到Catalog中，指定名字为IsInFourRingtEnv.registerFunction(IsInFourRing,newIsInFourRing());//在SQL语句中使用IsInFourRing函数TableinFourRingTab=tEnv.sqlQuery(SELECTidFROMgeoWHEREIsInFourRing(lon,lat));表函数能够接收零到多个标量输入，输出零到多行，每行数据有一到多列。表函数更像是一个表，一般出现在FROM之后。继承