Spark Engine共2篇

Spark Streaming的系统架构

Spark Streaming的系统架构-华尔子博
本节首先分析传统流处理系统架构存在的问题,然后介绍 Spark Streaming 的系统架构及其工作原理和优势。 传统流处理系统架构 流处理架构的分布式流处理管道执行方式是,首先用数据采集系统接收...
南宫世家的头像-华尔子博南宫世家24天前
04113

Spark Streaming简介

Spark Streaming简介-华尔子博
Spark Streaming 是 Spark 核心 API 的一个扩展,可以实现高吞吐量的、具备容错机制的实时流数据的处理。 Spark Streaming 支持从多种数据源获取数据,包括 Kafka、Flume、Twitter、ZeroMQ、Kin...
天山雪莲的头像-华尔子博天山雪莲27天前
03214