记录安装Spark环境的过程。前提是Hadoop集群已经安装，详见：Hadoop 2.X 集群安装环境：Centos 6.4 X64 & Hadoop 2.2（三节点集群） & Spark 1.01、获取Spark源码，可以去官网下载，解压。2、编译源码。1）先安装Maven。2）进入源码目录，执行...
分类：
其他好文 时间：
2014-07-16 19:28:29
阅读次数：
180
SQLServer2012中新增的AlwaysOn简介SQLServer2012中新增的AlwaysOn是一个新增高可用性解决方案。在AlwaysOn之前，SQLServer已经有的高可用性和数据恢复方案,比如数据库镜像，日志传送和故障转移集群.都有其自身的局限性。而AlwaysOn作为微软新退出的解决方案，提取了数据库镜像..
分类：
数据库 时间：
2014-07-15 12:05:10
阅读次数：
505
环境源端系统HPUNIX11.31集群架构HP高可用集群数据库Oracle10.2.0.3目标端系统RHEL5.8x64集群架构ORACLERAC数据库11.2.0.1.0描述HP集群异常自动切换，导致GG进程异常。源端报错2014-07-1416:38:52ERROROGG01031Thereisaprobleminnetworkcommunication,aremotefileproblem,encry..
分类：
数据库 时间：
2014-07-15 11:45:48
阅读次数：
296
数据存储 MongoDb 针对大数据量、高并发、弱事务的互联网应用 MemCache 简单的key-value存储，读取内存，效率高 Redis 可存储list，持久化，内存读取效率高 Cassandra 分布式数据库，更好的扩展性，对大数据更好的支持 http://www.ibm...
分类：
其他好文 时间：
2014-07-15 08:00:42
阅读次数：
220
集群安装总览参见这里Zookeeper的配置 1，/etc/profile中加入zk的路径设置，见上面背景说明。 2，进入~/zk/conf目录，复制zoo_sample.cfg为zoo.cfg vim zoo.conftickTime=2000initLimit=10syncLimit=5dat....
分类：
其他好文 时间：
2014-07-14 23:08:46
阅读次数：
430
yarn.resourcemanager.ha.enabled true yarn.resourcemanager.ha.rm-ids ...
分类：
其他好文 时间：
2014-07-14 19:48:02
阅读次数：
359
【集群环境】
管理节点 10.0.0.19
数据节点 10.0.0.12
10.0.0.17
sql节点 10.0.0.18
10.0.0.22
1. 添加mysql用户
# groupadd mysql
# useradd mysql -g mysql
2. 安装m...
分类：
数据库 时间：
2014-07-14 18:03:39
阅读次数：
310
本文详细总结Spark分布式集群的安装步骤，帮助想要学习Spark的技术爱好者快速搭建Spark的学习研究环境。...
分类：
其他好文 时间：
2014-07-14 17:17:25
阅读次数：
289
1.先在所有数据库服务器上安装mysql-cluster包管理机：192.168.1.6数据节点：192.168.1.31192.168.1.32sql节点：192.168.1.33192.168.1.1112.在管理节点上配置[root@mysql~]#vim/etc/config.ini[ndbddefault]//数据节点公共配置
noofreplicas=2//数据备份数
datamemory=300M//..
分类：
数据库 时间：
2014-07-14 11:40:15
阅读次数：
349
又是期末又是实训TA的事耽搁了好久……先把写好的放上博客吧前文：用python + hadoop streaming 编写分布式程序（一） -- 原理介绍，样例程序与本地调试用python + hadoop streaming 编写分布式程序（二） -- 在集群上运行与监控使用额外的文件假如你跑的j...
分类：
编程语言 时间：
2014-07-14 10:59:55
阅读次数：
335
