码迷,mamicode.com
首页 > 其他好文 > 详细

SparkSession

时间:2018-05-21 12:26:47      阅读:282      评论:0      收藏:0      [点我收藏+]

标签:html   poi   .com   SQ   ons   park   uil   import   port   

在2.0版本之前,使用Spark必须先创建SparkConf和SparkContext

catalog:目录

Spark2.0中引入了SparkSession的概念,SparkConf、SparkContext 和 SQLContext 都已经被封装在 SparkSession 当中,并且可以通过 builder 的方式创建;可以通过 SparkSession 创建并操作 Dataset 和 DataFrame

SparkSession  The entry point to programming Spark with the Dataset and DataFrame API.

scala> import org.apache.spark.sql.SparkSession
SparkSession SparkSessionExtensions

SparkSession

标签:html   poi   .com   SQ   ons   park   uil   import   port   

原文地址:https://www.cnblogs.com/playforever/p/8144312.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!