编程之家

数据处理：Spark Streaming和Flink

minparsparkstreamstreaming

Spark运行架构以及容错机制

parspark

Spark 2.3.4 StandAlone 集群模式部署

parsparksta

pyspark之Structured Streaming window函数-滚动模式

minparsparkstreamstreamingstructstructurewindow

pyspark之Structured Streaming文件file案例

fileminparsparkstreamstreamingstructstructure

pyspark之Structured Streaming file文件案例1

fileminparsparkstreamstreamingstructstructure

Spark运行参数配置：根据数据量进行合理配置

parspark

Spark On Hive配置测试及分布式SQL ThriftServer配置

hiveparserversparksqlthrift

Spark 读取ElasticSearch

elasticsearchparsearchspark

Shark是一个新的数据分析系统，它基于Apache Spark构建，通过使用Spark的RDD（Resilient Distributed Dataset）抽象

apachedistributedistributedparrddsetshaspark