目录 · 概述 · 原理 · 组成 · 执行流程 · 性能 · API · 应用程序模板 · 通用读写方法 · RDD转为DataFrame · Parquet文件数据源 · JSON文件数据源 · Hive数据源 · 数据库JDBC数据源 · DataFrame Operation · 性能调优 ...
分类:
数据库 时间:
2017-07-31 09:58:34
阅读次数:
395
先贴代码 该段程序首先执行静态代码块加载配置文件 获得配置文件对象 声明连接池对象(静态代码块外) 获得连接池对象 获得配置文件内容 对连接池进行设置 以上静态代码块在加载类的时候就执行,并且只执行一次,避免了每次获得对象都要创建连接池的错误,防止了链接堆积过多的问题 获得链接: 关闭资源,放回链接 ...
分类:
数据库 时间:
2017-07-31 09:59:41
阅读次数:
154
背景 最近我们在替换生产环境的数据库服务器的时候,因该实例下库比较多,差不多有近200个库,加上维护窗口的时间有限,所以我们有必要写段脚本快速批量附加所有的库,并确保所有的库都附加成功。当前的情况是所有的库名都是唯一且不存在库名相似的情形,如 db_1 和 db_12 不存在这种库名相似的情况。 环 ...
分类:
数据库 时间:
2017-07-31 10:00:03
阅读次数:
262
网上转载来的测试,仅供参考。原文地址:http://www.mongoing.com/benchmark_3_0 本测试过程使用了2类机器。 测试均在单机器,单实例的情况下进行。 机器A(cache 12G,即内存>数据): 数据:{_id:默认,Name:"Edison",Num:随机数} 使用引... ...
分类:
数据库 时间:
2017-07-31 10:02:18
阅读次数:
193
错误原因:totalTime的类型为int,数据库中为NULL,int 类型不能赋值为NULL,只能为0,所以报此异常。 解决方案:将totalTime的类型改为Integer,或者初始化为0 ...
分类:
数据库 时间:
2017-07-31 10:03:19
阅读次数:
166
https://mysqlentomologist.blogspot.jp/2017/07/ https://mysqlentomologist.blogspot.jp/2017/07/ https://mysqlentomologist.blogspot.jp/2017/07/ https://m ...
分类:
数据库 时间:
2017-07-31 10:03:33
阅读次数:
500
select * from emp where deptno=30; --1 选择部门30中的所有员工。select ename,job,empno,deptno from emp where job='CLERK'; --2 列出所有办事员(CLERK)的姓名,雇员编号和部门编号。select e ...
分类:
数据库 时间:
2017-07-31 10:05:45
阅读次数:
211
静默安装参考:http://www.cnblogs.com/colmeluna/p/5686142.html 实际安装中: 1.跳过了第二步设定交换区空间 2.安装完成后没有提示执行orainstRoot.sh,只有root.sh 建库参考:http://www.cnblogs.com/jyzhao ...
分类:
数据库 时间:
2017-07-31 10:07:21
阅读次数:
170
首先,JDBC对于SQLSERVER来说默认是支持返回,但对于MySql来说,只默认支持存储过程返回多个ResultSet,那对于手写SQL怎么办。 其实很简单,只要一个在连接字符串中加一个参数:allowMultiQueries=true。 代码实现如下: @Testpublic void tes... ...
分类:
数据库 时间:
2017-07-31 10:07:58
阅读次数:
190
浅析有效的游标管理 【思路分析】 能够把游标理解成共享的运行计划,当sql不被共享时。常规的解决思路有两个方向: 1、调整共享池的尺寸(共享池的库缓存区中共享运行计划); 2、sql书写时尽量重用绑定变量,以起到共享sql的作用。 【较差的游标管理体现】 1、不重用运行计划(缺少绑定变量) 2、重用 ...
分类:
数据库 时间:
2017-07-31 10:08:06
阅读次数:
153
1、MySQL数据库的安装 数据库,主要用于数据的存放 2、MySQL规范 sql语句可单行或多行书写,以分号结尾 语句为大写,变量名为小写 3、MySQL数据库的操作 创建——CREATE DATABASE db_name; 查看——SHOW DATABASES; 修改数据库的字符串格式——ALT ...
分类:
数据库 时间:
2017-07-31 10:08:40
阅读次数:
231
在创建数据库主从配置后,若想删除数据库的主从服务可根据以下步骤来删除数据库主从 1.停止slave服务器的主从同步 为了防止主从数据不同步,需要先停止slave上的同步服务, STOP SLAVE; 2.对master服务器的数据库加锁 为了避免在备份的时候对数据库进行更新操作,必须对数据库加锁。 ...
分类:
数据库 时间:
2017-07-31 11:21:14
阅读次数:
282
代码格式如下: 要注意的是:in后面的查询语句必须是查询一个字段跟前面的表相对应的。比如要根据订单号orderID,OpenBills 这个表就需要查询到orderID这个字段,BillConsume这个表的条件就要判断orderID ...
分类:
数据库 时间:
2017-07-31 11:24:20
阅读次数:
307
双机热备的概念简单说一下,就是要保持两个数据库的状态自动同步。对任何一个数据库的操作都自动应用到另外一个数据库,始终保持两个数据库数据一致。 这样做的好处多。 1. 可以做灾备,其中一个坏了可以切换到另一个。 2. 可以做负载均衡,可以将请求分摊到其中任何一台上,提高网站吞吐量。 对于异地热备,尤其 ...
分类:
数据库 时间:
2017-07-31 11:45:20
阅读次数:
244
主从形式 mysql主从复制 灵活 一主一从 主主复制 一主多从 扩展系统读取的性能,因为读是在从库读取的; 多主一从 5.7开始支持 联级复制 用途及条件 mysql主从复制用途 实时灾备,用于故障切换 读写分离,提供查询服务 备份,避免影响业务 主从部署必要条件: 主库开启binlog日志(设置 ...
分类:
数据库 时间:
2017-07-31 11:45:40
阅读次数:
171
一: mysql默认是安装记录的物理顺序取数据的,如果不加order by 排序,可能得不到预期的结果。 (1) 获取 两个时间点的 id (很快) $sql = ‘select id from apply_info where create_time< {$now} limit 1’; (要加 o ...
分类:
数据库 时间:
2017-07-31 11:46:31
阅读次数:
202
本文介绍springboot通过jdbc访问关系型MySQL,通过spring的JdbcTemplate去访问。 准备工作 jdk 1.8 maven 3.0 idea mysql 初始化mysql: 创建工程 引入依赖: 在pom文件引入spring-boot-starter-jdbc的依赖: 引 ...
分类:
数据库 时间:
2017-07-31 12:28:36
阅读次数:
163
LINQ的书写格式如下: from 临时变量 in 集合对象或数据库对象 where 条件表达式 [order by条件] select 临时变量中被查询的值 [group by 条件] Lambda表达式的书写格式如下: (参数列表) => 表达式或者语句块 其中: 参数个数:可以有多个参数,一个 ...
分类:
数据库 时间:
2017-07-31 12:29:27
阅读次数:
232
为了实现MYSQL数据库的冗灾、备份、恢复、负载均衡等功能,喻名堂这两天一直在学习和研究mysql的双机热备,其实MYSQL的双机热备就是使用MYSQL同步功能两种方式里面的“主-主”同步方式实现的。在一开始搜索资料进行配置时没有注意版本的问题,所以试了很多次都没有成功,后来才知道搜索的方法不对,结 ...
分类:
数据库 时间:
2017-07-31 12:30:24
阅读次数:
230
有时候为了服务器具有更好的效率,可以定时重启apache服务等。让网站运行的效果更快。 有时候为了服务器具有更好的效率,可以定时重启apache服务等。让网站运行的效果更快。 采用at命令添加计划任务。有关使用语法可以到window-》“开始”-》运行“cmd”-》执行命令“at /”,这样界面中就 ...
分类:
数据库 时间:
2017-07-31 12:40:29
阅读次数:
141