阿里云开源离线同步工具DataX3.0介绍 一. DataX3.0概览 ? DataX 是一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。 ...
分类：
其他好文 时间：
2017-03-17 17:38:39
阅读次数：
417
伪分布模式下,如(weekend110)hbase-env.sh配置文档中的HBASE_MANAGES_ZK的默认值是true，它表示HBase使用自身自带的Zookeeper实例。但是，该实例只能为单机或伪分布模式下的HBase提供服务。 若是分布式模式，则需要配置自己的Zookeeper集群。如 ...
分类：
其他好文 时间：
2017-03-15 13:38:18
阅读次数：
279
通过这一阶段的调研总结，从内部机理的角度详细分析，HDFS、MapReduce、Hbase、Hive是如何运行，以及基于Hadoop数据仓库的构建和分布式数据库内部具体实现。如有不足，后续及时修改。 HDFS的体系架构 整个Hadoop的体系结构主要是通过HDFS来实现对分布式存储的底层支持，并通过 ...
分类：
其他好文 时间：
2017-03-15 00:23:55
阅读次数：
287
用Dos的copy命令实现： 将 a.js b.js c.js 合并为一个 abc.js，最后的 /b 表示文件为二进位文件，copy 命令的其它参数可以在 cmd 里输入 copy /? 学习 在项目存放 JS 的文件夹下新建一个 TXT 文件，将代码复制进去，并修改需要合并哪些文件，最后保存并将 ...
分类：
其他好文 时间：
2017-03-14 13:34:26
阅读次数：
306
在postman的环境变量中先设置好一个用户的token（事先你的数据库里面要有用户的这个数据），如下图： 然后在api请求的url 的head头部添加对应的token键名，value值用花括号{{token}}包住，就会自动获取其值。 1、routes.php文件设置中间件路由,将你的控制器放在里 ...
centos6.6搭建zookeeper-3.4.6完全分布式环境 转载 2015-06-28 22:14:17 标签：it centos6.6搭建zookeeper-3.4.6完全分布式环境 转载 2015-06-28 22:14:17 标签：it 为了搭建HBase完全分布式环境，前提就是搭建好 ...
分类：
其他好文 时间：
2017-03-06 17:19:59
阅读次数：
158
hbase 执行批量删除时出现错误： Exception in thread "main" java.lang.UnsupportedOperationException at java.util.AbstractList.remove(AbstractList.java:161) at org.a ...
分类：
编程语言 时间：
2017-02-25 23:52:55
阅读次数：
1293
因为项目的原因，需要将Ubuntu中的一些信息记录到Windows中的Postgresql数据库中，查看网上信息，最后成功了，特地记录以下，需要以下步骤： （1）在Windows中Postgresql目录下找到pg_hba.conf文件，并做修改。 在此文件中添加一行，格式参考下面七种： local ...
分类：
数据库 时间：
2017-02-20 22:39:07
阅读次数：
179
Greenplum身份验证和Postgresql是一样的。参考文档是gpdb 管理指南和postgresql 官网文档。 主要的配置文件是master_directory下的pg_hba.conf和postgres.conf 对配置在pg_hba.conf中的（IP、用户名、数据库名）组合无条件tr ...
分类：
其他好文 时间：
2017-02-13 20:09:40
阅读次数：
935
Default firmware for this guide is:2118it.binVersion 20.00.07.00Release date: 11-FEB-16 所有资源已转到百度盘: 链接: https://pan.baidu.com/s/1hsG9rXq 密码: vp4g WARN ...
分类：
其他好文 时间：
2017-02-12 10:52:25
阅读次数：
2133
