在把hdfs上数据迁移到hive中的表时，若出现数据位NULL，是因为没有指定列分隔符。由于hive默认的分隔符是/u0001（Ctrl+A）,为了平滑迁移，需要在创建表格时指定数据的分割符号，语法如下：[sql]view plaincopyprint?hive(default)>createext...
分类：
其他好文 时间：
2015-07-14 17:19:06
阅读次数：
128
一致性哈希算法是分布式系统中常用的算法。比如，一个分布式的存储系统，要将数据存储到具体的节点上，如果采用普通的hash方法，将数据映射到具体的节点上，如key%N，key是数据的key，N是机器节点数，如果有一个机器加入或退出这个集群，则所有的数据映射都无效了，如果是持久化存储则要做数据迁移，如果是...
分类：
编程语言 时间：
2015-07-14 09:55:52
阅读次数：
163
什么是LVM LVM是 Logical Volume Manager（逻辑卷管理）的简写，它是Linux环境下对磁盘分区进行管理的一种机制。为什么使用LVM 直接使用fdisk分区挂载的话，随着时间的推移，数据量越来越大，硬盘空间越来越小，要想扩充容量的话，就必须挂载新硬盘然后做数据迁移，这就必然导...
分类：
系统相关 时间：
2015-07-13 17:48:58
阅读次数：
218
1。数据库状况 生产环境是11G，linux系统，測试环境是10G，windows系统，须要从生产环境导出一个用户下全部的数据，导入測试环境中。 由于数据量比較小，准备採用EXP和IMP工具来做。 2，在生产环境上导出用户数据 命令： exp \'system/syspl as sysdba...
分类：
数据库 时间：
2015-07-12 21:30:43
阅读次数：
158
oracle旗下的GOLDENDATE是用来做数据容灾的一个软件俗称OGG,当然也可以用来支持热备份数据库，和跨平台跨数据库的数据迁移，具体的了解可以通过自行百度。他的概念不是我要在这写的。准备工作下载OGG介质并且解压缩安装，修改oracle用户环境变量（因为比较简单就不在这赘述了，..
分类：
数据库 时间：
2015-07-07 19:43:43
阅读次数：
178
一、静态迁移方案
1、在hbase停止的状态下进行数据的迁移。
2、采用Hadoop distcp方式，将以上目录的内容，迁移到另一个集群。
使用add_table.rb进行恢复。
缺点：不太灵活
二、动态迁移方案
-Replication备份方案
-CopyTable方案
-Export and Import方案
1.Replication备份方案
修改hbase...
分类：
其他好文 时间：
2015-07-06 12:20:41
阅读次数：
125
1、先在windows上将数据都导出一个文件。（这里以某个数据库为例）导出整个数据库
mysqldump -u 用户名 -p密码 数据库名 > 导出的文件名
导出指定表
mysqldump -u 用户名 -p密码 数据库名 表名1 表名2 ... > 导出的
文件名2、将数据从Windows拷贝到Linux中。3、登录Linux的MySql数据库
4、创建与windows同名的数据库名。mys...
分类：
数据库 时间：
2015-07-04 11:15:51
阅读次数：
131
创建数据迁移 使用 Artisan 命令行的 migrate:make 命令创建一个迁移：(在命令行模式下使用) php?artisan?migrate:make?create_users_table ? ? ? ? ? ? 所有的迁移都被存放在 app/database/migrations ...
分类：
数据库 时间：
2015-07-03 16:18:35
阅读次数：
329
1 ， Global.asax.cs添加如下代码：Database.SetInitializer(null);2 ，修改表结构 ，3 ，修改实体类和表结构同步4 ，如果第一次数据迁移 执行以下代码：Enable-Migrations -ProjectName SportStore.Domain -C...
分类：
其他好文 时间：
2015-07-02 19:04:02
阅读次数：
121
