Spark相關文章索引（4）

環境部署

Spark1.6.0 on Hadoop-2.6.3 安裝配置

算法架構

1. 【微信分享】王團結：如何用Hadoop/Spark構建七牛數據平臺

2. 38 Sparkcore中的BlockManager

P.K.

1. SparkSQL與DataFrame

2. spark快速大數據分析之讀書筆記-flatmap與map的區別

   map()是將函數用於RDD中的每個元素，將返回值構成新的RDD。
   flatmap()是將函數應用於RDD中的每個元素，將返回的迭代器的所有內容構成新的RDD

3. RDD、DataFrame和DataSet的區別

4. Spark on yarn有分爲兩種模式yarn-cluster和yarn-client

5. 看了之後不再迷糊-Spark多種運行模式

實戰演練

1. SCALA_IDE開發Spark程序

2. Java開發Spark程序

3. SparkStreaming 打印輸出demo

4. SparkStreaming wordcount demo

5. SparkStreaming 刪選含有error的行