码迷,mamicode.com
首页 >  
搜索关键字:spark sql    ( 86772个结果
PySpark第一篇.PySpark简介
1.Spark概述 Apache Spark是一个闪电般快速的实时处理框架。它进行内存计算以实时分析数据。由于 Apache Hadoop MapReduce 仅执行批处理并且缺乏实时处理功能,因此它开始出现。因此,引入了Apache Spark,因为它可以实时执行流处理,也可以处理批处理。 除了实 ...
分类:其他好文   时间:2021-04-06 15:01:09    阅读次数:0
MySQl总结
SQL基础 SQl简介 SQL全称是structure qurry language,由IBM在上个世纪70年代开发出来。 SQL语句的分类 DDL(数据定义数据) 主要是数据库内部对象的创建,删除,修改的操作语言 创建数据库 create database name 使用数据库 use dbnam ...
分类:数据库   时间:2021-04-06 14:59:58    阅读次数:0
spark中的持久化(cache()、persist()、checkpoint())
RDD持久化级别 | 持久化级别 | 含义解释 | | | | | MEMORY_ONLY | 使用未序列化的Java对象格式,将数据保存在内存中。如果内存不够存放所有的数据,则数据可能就不会进行持久化。那么下次对这个RDD执行算子操作时,那些没有被持久化的数据,需要从源头处重新计算一遍。这是默认的 ...
分类:系统相关   时间:2021-04-06 14:53:55    阅读次数:0
Mybatis报错Cannot find class: com.mysql.cj.jdbc.Driver排查踩坑记录
初次学习mybatis,跑一个最简单的demo,然而报错: java.sql.SQLException: Error setting driver on UnpooledDataSource. Cause: java.lang.ClassNotFoundException: Cannot find ...
分类:数据库   时间:2021-04-06 14:48:09    阅读次数:0
DVWA靶机通关xss(二)
前面我们已经打开了靶机,这就不用在打开了,直接开始吧。 存储型的xss漏洞。 1.low 当我想在name处输入测试代码的时候,却被限制了输入长度,姑在name字段处是无法进行测试了的,就只能在message处进行操作了。 输入最基本的代码, 就会出现xss这个弹窗,可以猜到并没有做任何的过滤。 再 ...
分类:其他好文   时间:2021-04-06 14:35:15    阅读次数:0
获取执行计划之dbms_xplan.display_cursor()
前提 SQL执行计划仍在Shared Pool中 函数体 DBMS_XPLAN.DISPLAY_CURSOR( sql_id IN VARCHAR2 DEFAULT NULL, child_number IN NUMBER DEFAULT NULL, format IN VARCHAR2 DEFAU ...
分类:数据库   时间:2021-04-06 14:33:43    阅读次数:0
Java 的SPI机制
Java 的SPI机制 什么是java的SPI机制 ? SPI(Service Provider Interface)主要是被框架开发人员使用的一种技术。例如,使用 Java 语言访问数据库时我们会使用到 java.sql.Driver 接口,不同数据库产品底层的协议不同,提供的 java.sql. ...
分类:编程语言   时间:2021-04-05 12:38:45    阅读次数:0
大数据总结
学习过得技术 HDFS YARN MR HIVE HBASE SPARK SPARK(sparkCore、sparkSql、sparkStreaming) HDFS 数据库管理、 存磁盘 Ha模式(在zookeeper之上) 联邦机制(把大象装进冰箱) split切片 Hbase 列式数据库 半结构 ...
分类:其他好文   时间:2021-04-05 12:37:34    阅读次数:0
JDBC原生操作
JDBC 原生JDBC package com.jdbc.test; import com.jdbc.model.Person; import java.sql.Connection; import java.sql.DriverManager; import java.sql.PreparedSt ...
分类:数据库   时间:2021-04-05 12:11:30    阅读次数:0
greenplum,teradata,presto,clickhouse四种分布式数据库的对比【转】
1. 四种数据库的比较 数据库描述 Greenplum 开源大规模并行数据分析引擎。借助MPP架构,在大型数据集上执行复杂SQL分析的速度比很多解决方案都要快。应用广泛。 Teradata 大型数据仓库系统,产品成熟,价格昂贵。用于证券系统。 Presto 分布式SQL查询引擎, 专门进行高速、实时 ...
分类:数据库   时间:2021-04-05 12:00:18    阅读次数:0
86772条   上一页 1 ... 50 51 52 53 54 ... 8678 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!