前言
提示:自己学习Pyspark时所记录笔记,以便日后回忆
1.学习spark时的一些 官方API和参考文档################ Spark Python API and Docs ###################
Spark Python API Docs
i.pyspark package
ii.pyspark.sql module
iii.pyspark.ml package
iv.pyspark.streaming module
v.pyspark.mllib package
vi.pyspark.resource module
github源码:https://github.com/apache/spark/tree/master/python
github examples: https://github.com/apache/spark/tree/master/examples/src/main/python
①.Pyspark学习笔记(二)— spark-submit命令
②.Pyspark学习笔记(三)— SparkContext 与 SparkSession
③.Pyspark学习笔记(四)弹性分布式数据集 RDD 综述(上)
④Pyspark学习笔记(四)弹性分布式数据集 RDD 综述(下)
⑤Pyspark学习笔记(五)RDD操作(一)_RDD转换操作
⑥Pyspark学习笔记(五)RDD操作(二)_RDD行动操作
⑦Pyspark学习笔记(五)RDD操作(三)_键值对RDD转换操作



