从Spark 应用中访问 Avro 数据文件.PDFVIP

  • 51
  • 0
  • 约8.37千字
  • 约 6页
  • 2018-11-23 发布于天津
  • 举报
从应用中访问数据文件从应用中访问数据文件写入压缩的数据文件访问分区的数据文件指定和到的转换到的转换局限性示例示例示例与函数示例与格式写入压缩的记录写入分区数据读取分区数据指定一个记录名示例示例从应用中访问数据文件支持从各种各样的数据源加载和保存到使用库您可以使用访问格式编码的数据库支持大部分和记录之间的转换这个库自动执行转换读取数据并且转换它为内部的表示转换仅在读取以及写入数据是被执行默认情况下指定一个目录时方法默默的跳过没有扩展名的文件为了包含所有的文件设置请看配置应用继续阅读写入压缩的数据文

从 Spark 应用中访问 Avro 数据文件 从 Spark 应用中访问 Avro 数据文件 写入压缩的数据文件 访问分区的数据文件 指定 Record Name 和 Namespace Spark SQL Avro 到 Spark SQL 的转换 Spark SQL 到 Avro 的转换 局限性 API 示例 S

文档评论(0)

1亿VIP精品文档

相关文档