Spark SQL 增加了DataFrame 即带有Schema信息的RDD DataFrame 创建 启动pyspark（由于内存不够 启动本地，模式） pyspark --master local pyspark 自动生成 sc，sparksession from pyspark import ...
分类：
数据库 时间：
2019-11-09 22:07:07
阅读次数：
95
1、 MIN() 函数 MIN 函数返回一列中的最小值。NULL 值不包括在计算中。 SQL MIN() 语法 SELECT MIN(column_name) FROM table_name 注释：MIN 和 MAX 也可用于文本列，以获得按字母顺序排列的最高或最低值。 SQL MIN() 实例 我 ...
分类：
数据库 时间：
2019-11-09 22:07:23
阅读次数：
131
1、 LEN() 函数 LEN 函数返回文本字段中值的长度。 SQL LEN() 语法 SELECT LEN(column_name) FROM table_name SQL LEN() 实例 我们拥有下面这个 "Persons" 表： IdLastNameFirstNameAddressCity ...
分类：
数据库 时间：
2019-11-09 22:09:10
阅读次数：
99
步骤一：下载安装包，打开Mysql官网，找到对应的 下载路径如下：https://downloads.mysql.com/archives/community/ wget https://downloads.mysql.com/archives/get/file/mysql-5.7.27-linux ...
分类：
数据库 时间：
2019-11-09 23:41:44
阅读次数：
109
在应用系统开发初期，由于开发数据库数据比较少，对于查询sql语句，复杂试图的编写等体会不出sql语句各种写法的性能优劣，但是如果将应用系统提交实际应用后，随着数据库中数据的增加，系统的响应速度就成为目前系统需要解决的最主要问题之一。系统优化中一个很重要的方面就是sql语句的优化。对于海量数据，劣质s ...
分类：
数据库 时间：
2019-11-09 23:49:54
阅读次数：
139
1、在/home目录下新建mysql目录 mysql目录中新建三个目录：conf目录、logs目录、data目录，建这些目录的目的是用来挂载docker中的mysql下的目录的。 结果如下： 1.1、然后在conf中写一个mysql的配置文件my.cnf，里面就是配置一些端口号啊、用什么模式啊，内存 ...
分类：
数据库 时间：
2019-11-09 23:52:23
阅读次数：
118
懒加载在一对多，或者多对多的时候，如果要获取多的这一部分的数据的时候，通过一个relationship定义好对应关系就可以全部获取，此时获取到的数据是list，但是有时候不想获取全部数据，如果要进行数据筛选就需要遍历筛选，就比较麻烦，可以从查询返回值里面入手，比如在获取到的数据里面还要加个过滤条件， ...
分类：
数据库 时间：
2019-11-09 23:54:29
阅读次数：
188
group_by：根据某个字段进行分组，比如想要根据年龄进行分组，再统计每一组有多少人having：对查找结果进一步过滤，类似于SQL语句的where 准备工作 from sqlalchemy import create_engine, Column, Integer, String, Float, ...
分类：
数据库 时间：
2019-11-09 23:56:34
阅读次数：
216
创建一个用户： create user 'oukele'@'%' identified by 'oukele'; 提示下面所列出的信息的话，得刷新一下权限表 The MySQL server is running with the --skip-grant-tables option so it c ...
分类：
数据库 时间：
2019-11-10 00:00:50
阅读次数：
149
前言： 一直是想知道一条SQL语句是怎么被执行的，它执行的顺序是怎样的，然后查看总结各方资料，就有了下面这一篇博文了。 本文将从MySQL总体架构 >查询执行流程 >语句执行顺序来探讨一下其中的知识。 一、MySQL架构总览： 架构最好看图，再配上必要的说明文字。 下图根据参考书籍中一图为原本，再在 ...
分类：
数据库 时间：
2019-11-10 09:22:14
阅读次数：
71
mysql8修改my.in配置重启服务之后报错：本地计算机上的MySQL服务启动后停止。某些服务在未由其他服务或程序使用时将自动停止解决方案：1、备份mysql数据目录整个目录备份到其他地方，然后清空该目录2、找到之前下载的安装文件例如：mysql-installer-community-8.0.16.0.msi双击打开然后重新配置安装重新安装成功之后3、把刚才备份的data目录全部拷贝覆盖回来，
分类：
数据库 时间：
2019-11-10 09:30:45
阅读次数：
164
启动MongoDB: 连接： 设置密码： Centos设置防火墙 阿里云服务器设置防火墙无效。。。 需要修改安全组配置，才可以远程访问。 / 以下设置对阿里云服务器无效，阿里云服务器需要修改安全组配置 / 查看27017是否允许远程访问 一、列出所有端口 查看已经开放的端口： 开启端口 二、设置防火 ...
分类：
数据库 时间：
2019-11-10 09:53:44
阅读次数：
116
一、简介postgres在9.0之后引入了主从的流复制机制，所谓流复制，就是从服务器通过tcp流从主服务器中同步相应的数据。这样当主服务器数据丢失时从服务器中仍有备份。与基于文件日志传送相比，流复制允许保持从服务器更新。从服务器连接主服务器，其产生的流WAL记录到从服务器，而不需要等待主服务器写完WAL文件。PostgreSQL流复制默认是异步的。在主服务器上提交事务和从服务器上变化可见之间有一个
分类：
数据库 时间：
2019-11-10 10:12:44
阅读次数：
70
MySQL的基本操作可以包括两个方面：MySQL常用语句如高频率使用的增删改查（CRUD）语句和MySQL高级功能，如存储过程，触发器，事务处理等。
分类：
数据库 时间：
2019-11-10 10:17:53
阅读次数：
80
看完这篇你就是年薪百万的数据库工程师了
分类：
数据库 时间：
2019-11-10 10:29:31
阅读次数：
97
Mysql Join 连接查询(中) 认识 就我平时的数据接触来看, 连接查询也没有很复杂,不够是非常需要耐心和逻辑的, 一点点将数据查出来, 拼接等. 没有什么技巧, 多练习就会了. 无非就是 表之间根据共同key来连接, 查询时结合union, where, 子查询这些... , 真的不难的, ...
分类：
数据库 时间：
2019-11-10 10:30:26
阅读次数：
97
参考：https://www.dazhuanlan.com/2019/08/25/5d616a1fe73ac/ IDEA连接MySQL错误 MySQL8.0配置成功后，在idea中进行连接，发现报错信息如下： Connection to @localhost failed. [08001] Coul ...
分类：
数据库 时间：
2019-11-10 11:42:40
阅读次数：
126
增删改查-数据库最基本使用方法，也是数据库最常用的操作方法； 用到的命令：insert[into] 插入；delete from 删除；update 修改；select 查询。 首先说一说插入的格式(即新增数据)： 1、insert into table_name(field1,field2,fie ...
分类：
数据库 时间：
2019-11-10 11:43:13
阅读次数：
81
应该是没有修改环境变量 使用命令 vi /etc/profile 在文件中添加环境变量 退出后，使用命令 source /etc/profile 重启环境变量 再使用命令 mysqld --initialize --user=mysql --basedir=/usr/local/mysql --da ...
分类：
数据库 时间：
2019-11-10 11:45:44
阅读次数：
743
mysql从5.5.3版本开始，才支持4字节的utf8编码，编码名称为utf8mb4（mb4的意思是max bytes 4），这种编码方式最多用4个字节存储一个字符。 要想证明这个问题，可以执行以下sql： select * from information_schema.CHARACTER_SET ...
分类：
数据库 时间：
2019-11-10 11:57:46
阅读次数：
113
