Spark Streaming_第七章笔记

Spark Streaming_第七章笔记

• 1.流计算概述
• • 1.1流数据特点：
  • 1.2流计算
  • • 1.2.1流数据：
    • 1.2.2流计算的要求：
  • 1.3流计算处理流程：
• 2.Spark Streaming
• 3.DStream操作概述
• • 3.1创建StreamingContext对象
• 4基本输入源
• • 4.1文件流
  • • 4.1.1.在spark-shell中创建文件流
    • 4.1.2采用独立应用程序方式创建文件流
  • 4.2套接字流
  • 4.3RDD队列流
• 5高级数据源
• • 5.1编写Spark Streaming程序使用Kafka数据源</