Spark foreachpartiton和mappartition的异同

标签：落地   map   必须   reac   mil   form   park   不同   返回   

相同

都是对分区进行操作

不同

1、foreachpartition是Action操作，mappartition是Transformation操作

2、foreachpartition无返回值，mappartition有返回值

3、foreachpartition一般都是在程序末尾比如说要落地数据到存储系统中如mysql，es，或者hbase中，可以用它。当然在Transformation中也可以落地数据，但是它必须依赖action操作来触发它

Spark foreachpartiton和mappartition的异同

标签：落地   map   必须   reac   mil   form   park   不同   返回   

原文地址：https://www.cnblogs.com/Alcesttt/p/11406205.html