Spark性能调优

标签：height   png   overflow   性能调优   blog   rac   use   www   nbsp   

石杉老师讲要从以下几个方面去优化Spark的性能，其中Shuffle调优是重点。 

下面是与调优相关的几篇不错的博客，以供参考

官网的调优 https://spark.apache.org/docs/latest/tuning.html

序列化 https://stackoverflow.com/questions/40261987/when-to-use-kryo-serialization-in-spark

shuffle调优 https://www.cnblogs.com/arachis/p/Spark_Shuffle.html

Spark性能调优

标签：height   png   overflow   性能调优   blog   rac   use   www   nbsp   

原文地址：https://www.cnblogs.com/xdlaoliu/p/10667115.html