自定义sparkstreaming接收器receivers.pdfVIP

  • 2
  • 0
  • 约1.52万字
  • 约 11页
  • 2017-11-25 发布于天津
  • 举报
自定义接收器大数据博客自定义接收器除了可以使用内置的接收器比如和等来接收流数据还可以自定义接收器来从任意的流中接收数据开发者们可以自己实现类来从其他的数据源中接收数据本文将介绍如何实现自定义接收器并且在应用程序中使用我们可以用或者来实现自定义接收器实现自定义接收器一切从实现开始所有的自定义接收器必须扩展抽象类并且实现其中两个方法这个函数主要负责启动数据接收相关的事情这个函数主要负责停止数据接收相关的事情不管是和方法都不可以无限期地阻塞通常情况下会启动相关线程负责接收数据而会保证接收数据的线程被终

自定义Spark Streaming接收器(Receivers) Spark大数据博客 - 自定义Spark Streaming接收器(Receivers) Spark Streaming除了可以使用内置的接收器(Receivers,比如Flume、Kafka、Kinesis、file s和sockets等)来接收流数据,还可以自定义接收器来从任意的流中接收数据。开发者们可以自 己实现org.apache.spark.streaming.receiver.Receiver类

您可能关注的文档

文档评论(0)

1亿VIP精品文档

相关文档