在介绍 Spark SQL之前,我们先了解两种基本的数据分析方式。 一、数据分析的两种方式 数据分析的方式大致上可以划分为 SQL 和 命令式两种。 命令式 在前面的 RDD部分,非常明显可以感觉的到是命令式的,主要特征是通过一个算子,可以得到一个结果,通过结果再进行后续计算。例如: sc.para ...
分类:
数据库 时间:
2021-02-16 12:29:50
阅读次数:
0
Django批量导入数据库-bulk_create() if request.method == 'POST': text_list=request.POST.getlist('text') pwd_list = request.POST.getlist('pwd') datas = [] for ...
分类:
数据库 时间:
2021-02-16 12:34:27
阅读次数:
0
数据库基础 数据库分类 关系型数据库:SQL MySQL,Oracle,Sql Server,DB2,SQLite 通过表和表之间,行和列之间的关系进行数据的存储 非关系型数据库:NoSQL--Not Only SQL Redis,MongDB 对象存储,通过对象的自身的属性来决定 BDMS数据库管 ...
分类:
数据库 时间:
2021-02-16 12:38:25
阅读次数:
0
1.端口识别 Oracle 1521 SQL Server 1433 Mysql 3306 2.系统架构组合识别 Asp+.net : sqlserver Php : Mysql+postgresql java:mysql+oracle iis:sqlserver apache:mysql+post ...
分类:
数据库 时间:
2021-02-16 12:41:29
阅读次数:
0
删除emp_no重复的记录,只保留最小的id对应的记录。CREATE TABLE IF NOT EXISTS titles_test (id int(11) not null primary key,emp_no int(11) NOT NULL,title varchar(50) NOT NULL ...
分类:
数据库 时间:
2021-02-17 14:01:39
阅读次数:
0
1、背景: 启动MariaDB服务,通过python远程访问数据库失败,查询MariaDB日志(systemctl status mariadb)报错信息为: user: 'unauthenticated' host: '192.168.1.8' (This connection closed no ...
分类:
数据库 时间:
2021-02-17 14:04:16
阅读次数:
0
目录 目录LSMTree基本特性LevelDB基于LSMTree整体架构MemTable和Immutable MemTableSSTable和压实(compaction)SSTable的读Manifest文件current 文件参考文献toc LSMTree基本特性 LSM Tree(Log-Str ...
分类:
数据库 时间:
2021-02-17 14:19:17
阅读次数:
0
MySQL V5.0安装完成会默认会生成一个库(informantion_schema),里面有几十个表,保存着关于当前数据库系统所维护的其他数据库的信息,如数据库名、表、列、数据类型与访问权限等。 只可读 informantion_schema库包含多个只读表。它们实际上是视图,而不是基表,因此没 ...
分类:
数据库 时间:
2021-02-17 14:45:33
阅读次数:
0
注入位置分类 这个分类方式是我自己想的,可能会有一些不准确。如图所示注入方式有3种,内联、终止、堆叠。每种注入方式又根据服务器的响应分为4类,时间延迟、报错、布尔、将执行结果直接输出。 为什么给注入作分类? sql语句添加了注入语句之后,需要SQL编译器还是能正常编译并执行,才能达成攻击目的,不同的 ...
分类:
数据库 时间:
2021-02-17 14:49:51
阅读次数:
0
go-mysql-server 是在原有的基础上进行可增强,2021 q1版本实现了好多新的特性 如果结合以前的版本,triger 是一个很不错的特性,优化点也是很多的,很值得学习下 同时记得以前有写过与pg fdw 集成的,使用go-mysql-server或者一个基于mysql 的db 引擎,实 ...
分类:
数据库 时间:
2021-02-17 14:57:00
阅读次数:
0
平时我们在做应用开发时,一般情况下都会连接到一个MySQL数据库上去,把MySQL当个黑盒子一样执行各种增删改查的语句。里面的逻辑很多人都不清楚。那现在一个简单的 update users set name = "靓仔" where name = "吴磊" 在执行的时候,究竟会经过哪几步呢? Buf ...
分类:
数据库 时间:
2021-02-17 15:02:51
阅读次数:
0
##数据库相关概念 **DB:**数据库(database):存储数据的“仓库”。它保存了一系列有组织的数据 **DBMS:**数据库管理系统,又称为数据库软件(产品),用于管理DB中的数据 **SQL:**结构化查询语言,用于和DBMS通信的语言 文件目录介绍 my.ini文件下存在 端口号,字符 ...
分类:
数据库 时间:
2021-02-17 15:04:21
阅读次数:
0
一、MySQL安装 0、下载社区版安装包 官网下载地址:https://dev.mysql.com/downloads/installer/ 1、进入安装页面,这里不选择默认安装的所有工具,仅选择Server only。 2、如果没有VC++环境就点击execute安装,已安装就继续下一步。 3、安 ...
分类:
数据库 时间:
2021-02-17 15:08:41
阅读次数:
0
1. 题目 表1: Person ± ± +| 列名 | 类型 |± ± +| PersonId | int || FirstName | varchar || LastName | varchar |± ± +PersonId 是上表主键表2: Address ± ± +| 列名 | 类型 |± ...
分类:
数据库 时间:
2021-02-17 15:09:12
阅读次数:
0
jdbc连接MySql数据库 package com.zhy; import com.mysql.jdbc.Driver; import java.sql.*; /** * @author ZHY * @data 2021/2/15 */ public class TestJdbc { public ...
分类:
数据库 时间:
2021-02-18 12:57:47
阅读次数:
0
参考帖子:https://blog.csdn.net/linhunshi/article/details/72866345这篇帖子非常非常有用! 1、确保Android手机已经连上电脑,并且打开USB调试。(开发者模式打开+USB调试打开) 2、MAC终端下,命令行执行system_profiler ...
分类:
数据库 时间:
2021-02-18 12:58:46
阅读次数:
0
原文链接http://zhhll.icu/2021/01/03/%E6%95%B0%E6%8D%AE%E5%BA%93/%E5%85%B3%E7%B3%BB%E5%9E%8B%E6%95%B0%E6%8D%AE%E5%BA%93/MySQL/MySQL%E5%AD%98%E5%82%A8%E8%BF ...
分类:
数据库 时间:
2021-02-18 13:07:00
阅读次数:
0
假设不小心写错了sql的条件,写成了 `name` = "aa" = "bb",总结sql的语义转化如下: update 语句的set条件中update table set `name` = "aa" = "bb";==>:update table set `name` = ("aa" = "bb" ...
分类:
数据库 时间:
2021-02-18 13:09:04
阅读次数:
0
Redis的基本介绍 1.Redis是NoSQL数据库,不是传统的关系型数据库 官网:https://redis.io/和http://www.redis.cn/ 2.Redis:REmote Dictionary Server(远程字典服务器),Redis的性能非常高,单机能够达到15w qps, ...
分类:
数据库 时间:
2021-02-18 13:18:56
阅读次数:
0
mySQL常用SQL语句 【零】用户管理 新建用户 CREATE USER user_name IDENTIFIED BY 'password'; 更改密码 SET PASSWORD FOR user_name = PASSWORD('newpassword'); 权限管理 SHOW GRANTS ...
分类:
数据库 时间:
2021-02-18 13:20:39
阅读次数:
0