啊嘎哇在线工具箱

"Spark 编程指南"的目录

Spark 编程介绍

Spark 快速入门

Spark 编程指南

引入 Spark

初始化 Spark

Spark 共享变量

Spark 快速上手

Spark 独立应用程序

Spark Shell

Spark 运行程序

Spark RDDs

Spark 并行集合

Spark 外部数据集

Spark RDD 操作

Spark RDD持久化

Spark Streaming

Spark Streaming示例

Spark Streaming基本概念

Spark Streaming关联

初始化StreamingContext

Spark Streaming离散流

输入DStreams

DStream中的转换

DStream的输出操作

DStreams缓存或持久化

Spark Streaming Checkpointing

Spark Streaming部署应用程序

Spark Streaming监控应用程序

Spark Streaming性能调优

Spark Streaming减少批数据的执行时间

Spark Streaming设置正确的批容量

Spark Streaming内存调优

Spark Streaming容错语义

Spark SQL

Spark SQL开始

Spark SQL性能调优

Spark SQL其他接口

编写语言集成(Language-Integrated)的相关查询

Spark SQL数据类型

Spark SQL数据源

Spark SQL RDDs

Spark SQL parquet文件

Spark SQL JSON数据集

Spark SQL Hive表

GraphX编程指南

Spark GraphX开始

Spark GraphX图算法

Spark GraphX例子

Spark GraphX提交应用程序

独立运行Spark

在yarn上运行Spark

Spark GraphX属性图

Spark配置

Spark GraphX图操作符

Spark GraphX Pregel API

Spark GraphX图构造者

Spark GraphX顶点和边RDDs

Spark 编程指南 Spark 运行程序

2024-02-25 开发教程 Spark 编程指南匿名 3℃

Spark 运行程序

祝贺你成功运行你的第一个 Spark 应用程序!

要深入了解 API，可以从Spark编程指南开始，或者从其他的组件开始，例如：Spark Streaming。
要让程序运行在集群(cluster)上，前往部署概论。
最后，Spark 在 examples文件目录里包含了 Scala, Java 和 Python 的几个简单的例子，你可以直接运行它们：

# For Scala and Java, use run-example:
./bin/run-example SparkPi
# For Python examples, use spark-submit directly:
./bin/spark-submit examples/src/main/python/pi.py

上一节： Spark Shell

下一节： Spark RDDs