Spark Streaming概述（1）

一、Spark Streming 概述

Spark Streming是一个可扩展、高可靠、容错的一个流处理框架

二、Spark Streaming特点

低延时、容错、能够运行到成白上千的节点上、能够将批处理、机器学习、图计算等子框架和Spark Streaming综合起来使用

三、Spark Streaming处理流程

将不同的数据源的数据经过Spark Streaming处理后将结果输出到外部文件系统，如下图所示：

四、Spark Stream 工作流程

Internally, it works as follows. Spark Streaming receives live input data streams and divides the data into batches, which are then processed by the Spark engine to generate the final stream of results in batches.