大数据量的问题是很多面试笔试中经常出现的问题,比如baidu google 腾讯 这样的一些涉及到海量数据的公司经常会问到。 下面的方法是我对海量数据的处理方法进行了一个一般性的总结,当然这些方法可能并不能完全覆盖所有的问题,但是这样的一些方法也基本可以处理绝大多数遇到的问题。下面的一些问题基本直接
分类:
数据库 时间:
2016-01-28 16:36:57
阅读次数:
204
但是当我们在试图对数据库中的数据进行备份或者将sql文件导入到我们的数据库时可能就会碰到编码的问题,在windows下安装mysql时我们可以在安装的时候就选择好整个数据库的编码方式(通常设置成utf8),在linux下安装mysql的时候就不会有图形界面的安装,所以这篇随笔将记录一下如何在Linu
分类:
数据库 时间:
2016-01-28 15:22:17
阅读次数:
152
行级锁有三种模式: innodb 行级锁 record-level lock大致有三种:record lock, gap lock and Next-KeyLocks。 record lock 锁住某一行记录 gap lock 锁住某一段范围中的记录 next key lock 是前两者效果的叠加。
分类:
数据库 时间:
2016-01-28 15:22:34
阅读次数:
200
一般获取数据库连接的程序 Class.forName("com.mysql.jdbc.Driver"); final Connection connection = (Connection)DriverManager.getConnection("jdbc:mysql://localhost:330
分类:
数据库 时间:
2016-01-28 15:15:51
阅读次数:
203
Indexed Database API 目的是提供一个可供javascript存储和检索对象,并且还能进行查询,搜索等数据库操作 设计为几乎完全异步,因此绝大部分操作都稍后执行,因此每次操作都应该提供onerror和onsuccess来处理结果 目前还没有完全支持,因此:var indexedDB
分类:
数据库 时间:
2016-01-28 15:15:00
阅读次数:
262
这篇文章主要介绍了oracle中rownum和row_number()的使用方法以及区别和联系,十分的详细,有需要的小伙伴可以参考下。 row_number()over(partition by col1 order by col2)表示根据col1分组,在分组内部根据col2排序,而此函数计算的值
分类:
数据库 时间:
2016-01-28 15:13:54
阅读次数:
222
MySQL查看连接数 1、查看部分连接数(数目较多时) show processlist; 2、查看所有连接数(数目较多时) show full processlist;
分类:
数据库 时间:
2016-01-28 15:09:43
阅读次数:
198
待续。。。 index.php 调用方法: <?php header('Content-Type:text/html; charset=utf8'); require 'instance.php'; $db = MySQLDB::getInstance('127.0.0.1:3306', 'root
分类:
数据库 时间:
2016-01-28 13:56:50
阅读次数:
208
方法/步骤 对于把大量数据存放到数据库中,最好是用图形化数据库管理工具,可是如果没有了工具,只能执行命令的话这会是很费时间的事。那我们只能对数据进行组合,把数据组成insert语句然后在命令行中批量直行即可。 我们对下面数据进行组合,这用到excel中的一个功能。 在excel中有个fx的输入框,在
分类:
数据库 时间:
2016-01-28 13:54:49
阅读次数:
207
SCALA连接数据库批量插入: scala> import java.sql.DriverManager scala> var url = "jdbc:mysql://localhost:3306/mydb?useUnicode=true&characterEncoding=utf8" scala>
分类:
数据库 时间:
2016-01-28 13:49:44
阅读次数:
283
平时一直使用phpmyadmin或mysqldum进行导出,使用source命令导入数据库。 但换了新版本mysql后,上述导入方法出现以下错误: ERROR: Unknown command '\\'. Query OK, 2022 rows affected (0.71 sec) Records
分类:
数据库 时间:
2016-01-28 13:48:45
阅读次数:
242
下面有两个T-SQL,乍看之下以为是等效的,实际却不是这样 SELECT orderid1 ,
LocalCost ,
supplyGoodsName ,
buy...
分类:
数据库 时间:
2016-01-28 12:35:27
阅读次数:
189
Warning! You must change appropriately the definition of any dependent object (procedures, functions, and views) on an object being renamed by sp_iqre...
分类:
数据库 时间:
2016-01-28 12:31:41
阅读次数:
268
在学习hive的时候遇到了位图索引,查了查资料。现则很难管理如下,算是个基础知识的了解吧。 一:概念介绍: 百度百科: 位图索引主要针对大量相同值的列而创建(例如:类别,操作员,部门ID,库房ID等),索引块的一个索引行中存储键值和起止Rowid,以及这些键值的位置编码,位置编码中的每一位表示键值对
分类:
数据库 时间:
2016-01-28 12:26:53
阅读次数:
372
FROM : 通过协程实现mysql查询的异步化 前言 最近学习了赵海平的演讲,了解到facebook的mysql查询可以进行异步化,从而提高性能。由于facebook实现的比较早,他们不得不对php进行hack才得以实现。现在的php5.5,已经无需hack就可以实现了。对于一个web网站的性能来
分类:
数据库 时间:
2016-01-28 12:24:20
阅读次数:
214
Grant anonymous users permissions to containers and blobs By default, a container and any blobs within it may be accessed only by the owner of the sto
分类:
数据库 时间:
2016-01-28 12:24:14
阅读次数:
402