码迷,mamicode.com
首页 >  
搜索关键字:Python Spark    ( 141713个结果
SparkSession、SparkContext、SQLContext和HiveContext之间的区别。
SparkContext 是什么? 驱动程序使用SparkContext与集群进行连接和通信,它可以帮助执行Spark任务,并与资源管理器(如YARN 或Mesos)进行协调。 使用SparkContext,可以访问其他上下文,比如SQLContext和HiveContext。 使用SparkCon ...
分类:数据库   时间:2021-06-02 18:27:11    阅读次数:0
spring-boot集成spark并使用spark-sql
首先添加相关依赖: <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instan ...
分类:数据库   时间:2021-06-02 18:25:26    阅读次数:0
20202321 《Python程序设计》实验三报告
课程:《Python程序设计》 班级: 2023 姓名: 邬昱初 学号:20202321 实验教师:王志强 实验日期:2020年5月24日 必修/选修: 公选课 一、实验内容 内容:创建服务端和客户端,服务端在特定端口监听多个客户请求。客户端和服务端通过Socket套接字(TCP/UDP)进行通信。 ...
分类:编程语言   时间:2021-06-02 18:14:50    阅读次数:0
09 spark连接mysql数据库
1.安装启动检查Mysql服务。netstat -tunlp (3306) 2.spark 连接mysql驱动程序。–cp /usr/local/hive/lib/mysql-connector-java-5.1.40-bin.jar /usr/local/spark/jars 3.启动 Mysql ...
分类:数据库   时间:2021-06-02 18:05:24    阅读次数:0
09 spark连接mysql数据库
1.安装启动检查Mysql服务。netstat -tunlp (3306) 2.spark 连接mysql驱动程序。–cp /usr/local/hive/lib/mysql-connector-java-5.1.40-bin.jar /usr/local/spark/jars 3.启动 Mysql ...
分类:数据库   时间:2021-06-02 18:04:49    阅读次数:0
20203117 实验三《Python程序设计》实验报告
# 20203117 2019-2020-2 《Python程序设计》实验三报告课程:《Python程序设计》班级: 2031姓名: 邓子啸学号:20203117实验教师:王志强实验日期:2020年5月28日必修/选修: 公选课 1.实验内容 创建服务端和客户端,服务端在特定端口监听多个客户请求。客 ...
分类:编程语言   时间:2021-06-02 18:03:28    阅读次数:0
09 spark连接mysql数据库
spark连接mysql数据库: 1.安装启动检查Mysql服务。 2.spark 连接mysql驱动程序。 –cp /usr/local/hive/lib/mysql-connector-java-5.1.40-bin.jar /usr/local/spark/jars netstat -tunl ...
分类:数据库   时间:2021-06-02 17:54:28    阅读次数:0
Python爬虫-Scrapy框架的工作原理
Scrapy框架工作原理 Scrapy框架架构图 Scrapy框架主要由六大组件组成,分别为: ? 调度器(Scheduler),下载器(Downler),爬虫(Spiders),中间件(Middwares),管道(Item Pipeline)和Scrapy引擎(Scrapy Engine) Sca ...
分类:编程语言   时间:2021-06-02 17:51:17    阅读次数:0
Python函数和代码复用
一、编写函数,计算一个正整数n的各位数字之和。 提示: 方法1: 1)def str()函数将该正整数n转换为字符串s; 2)遍历字符串s,取出数字字符,并使用int()函数将其转换为整数num; 3)每次遍历时,将整数num累加至变量sum中,推出循环后,将sum作为函数返回值,即为各位数字之和。 ...
分类:编程语言   时间:2021-06-02 17:27:07    阅读次数:0
python ^、|、& 运算符
1. 与 如4&5,即(100) & (101) = 100 即4 2. 或 如4|5,即(100) | (101) = 101 即5 3. 异或 如4^5,即(100) ^ (101) = 001 即1 都是先转换为二进制然后按位操作的二进制结果转化为十进制再输出 4. 应用 判断n是不是2的幂: ...
分类:编程语言   时间:2021-06-02 17:25:51    阅读次数:0
141713条   上一页 1 ... 44 45 46 47 48 ... 14172 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!