SparkConf和SparkContext

标签：master   连接   name   参数   contex   用户   asp   local   应用   

任何Spark程序员都是从SparkContext开始的，SparkContext的初始化需要一个SparkConf对象，SparkConf对象中包含了Spark集群配置的各种参数。

SparkConf conf = new SparkConf().setMaster("local").setAppName("Eclat")

JavaSparkContext jsc = new JavaSparkContext(conf)

// 上面的local可以让Spark运行在单机单线程上面而无法连接到集群

// Eclat 当连接到一个集群时，这个值可以帮助我们在集群管理器的用户界面中找到应用

SparkConf和SparkContext

标签：master   连接   name   参数   contex   用户   asp   local   应用   

原文地址：https://www.cnblogs.com/walxt/p/12168767.html