首页 > 其他 > 详细

(转)Spark 算子系列文章

时间:2015-12-07 12:29:27      阅读:164      评论:0      收藏:0      [点我收藏+]

http://lxw1234.com/archives/2015/07/363.htm

Spark算子:RDD基本转换操作(1)–map、flagMap、distinct

Spark算子:RDD创建操作

Spark算子:RDD基本转换操作(2)–coalesce、repartition

Spark算子:RDD基本转换操作(3)–randomSplit、glom

Spark算子:RDD基本转换操作(4)–union、intersection、subtract

Spark算子:RDD基本转换操作(5)–mapPartitions、mapPartitionsWithIndex

Spark算子:RDD基本转换操作(6)–zip、zipPartitions

Spark算子:RDD基本转换操作(7)–zipWithIndex、zipWithUniqueId

 

Spark算子:统计RDD分区中的元素及数量 

 

Spark算子:RDD键值转换操作(1)–partitionBy、mapValues、flatMapValues

Spark算子:RDD键值转换操作(2)–combineByKey、foldByKey 

Spark算子:RDD键值转换操作(3)–groupByKey、reduceByKey、reduceByKeyLocally

Spark算子:RDD键值转换操作(4)–cogroup、join

Spark算子:RDD键值转换操作(5)–leftOuterJoin、rightOuterJoin、subtractByKey

 

Spark算子:RDD行动Action操作(1)–first、count、reduce、collect

Spark算子:RDD行动Action操作(2)–take、top、takeOrdered

Spark算子:RDD行动Action操作(3)–aggregate、fold、lookup

Spark算子:RDD行动Action操作(4)–countByKey、foreach、foreachPartition、sortBy

Spark算子:RDD行动Action操作(5)–saveAsTextFile、saveAsSequenceFile、saveAsObjectFile

Spark算子:RDD行动Action操作(6)–saveAsHadoopFile、saveAsHadoopDataset

Spark算子:RDD行动Action操作(7)–saveAsNewAPIHadoopFile、saveAsNewAPIHadoopDataset

 

(转)Spark 算子系列文章

原文:http://www.cnblogs.com/yxzfscg/p/5025645.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!