常用管理命令Hadoop管理员的常用命令。启动Hadoop进入HADOOP_HOME目录。执行sh bin/start-all.sh关闭Hadoop进入HADOOP_HOME目录。执行sh bin/stop-all.shbalancer运行集群平衡工具。管理员可以简单的按Ctrl-C来停止平衡过程。...
分类：
其他好文 时间：
2014-07-16 23:06:07
阅读次数：
249
./pdsh -R ssh -w node-10-0[0-5] hostname-R：指定传输方式，默认为rsh，本例为ssh，如果希望ssh传输需要另行安装pdsh-rcmd-ssh，如果希望ssh无密码访问需要提前配置好。-w：指定待执行命令host，也可以这样配置，node_[1-9, 35,...
分类：
其他好文 时间：
2014-07-16 21:42:57
阅读次数：
275
前言: 添加linux用户帐号,这个相对简单, 在面对集群, 许多机器的时候, 我们该如何去做和实现? 这篇短文, 简单讲解一些思路, 尽可能地涉及周边的一些知识点. 不光是运维人员会面临这个问题, 对一个基于linux平台的集群服务或软件(比如hadoop集群), 有时也会涉及到这块.应用场景:....
分类：
系统相关 时间：
2014-07-16 21:39:15
阅读次数：
360
本节主要从整体角度介绍Kafka的设计思想，其中的每个理念都可以深入研究，以后我可能会发专题文章做深入介绍，在这里只做较概括的描述以便大家更好的理解Kafka的独特之处。本节主要涉及到如下主要内容：
Kafka设计基本思想Kafka中的数据压缩Kafka消息转运过程中的可靠性Kafka集群镜像复制Kafka 备份机制
一、kafka由来
由于对JMS日常管理的过度开支和...
分类：
其他好文 时间：
2014-07-11 00:59:04
阅读次数：
246
Kafka是一个分布式的、可分区的、可复制的消息系统。它提供了普通消息系统的功能，但具有自己独特的设计。这个独特的设计是什么样的呢？
首先让我们看几个基本的消息系统术语：
Kafka将消息以topic为单位进行归纳。
将向Kafka topic发布消息的程序成为producers.
将预订topics并消费消息的程序成为consumers.
Kafka以集群的方式运行，可以由一个或多个服务组成，每个服务叫做一个broker....
分类：
其他好文 时间：
2014-07-11 00:01:24
阅读次数：
197
上篇以一个 demo 示例介绍了 Eureka 的 Application Service 客户端角色。今天我们继续了解 Eureka 的 Application Client 客户端，以一个简单的交互示例，介绍 Application Client 是如何使用 Eureka 获取 Application Service 实例并发送请求的。...
分类：
移动开发 时间：
2014-07-10 21:41:59
阅读次数：
365
Corosync+DRBD+MySQL构建高可用MySQL集群节点规划：node1.huhu.com172.16.100.103node2.huhu.com172.16.100.104资源名称规划资源名称：可以是除了空白字符外的任意ACSII码字符DRBD设备：在双节点上，此DRBD设备文件，一般为/dev/drbdN，主设备号147磁盘：在双方节点上，各自提..
分类：
数据库 时间：
2014-07-10 19:14:30
阅读次数：
430
一、客户需求1、需求描述有些客户有自己的存储设备，但是并没有集群文件系统服务，所以如果我们多个节点（计算节点）如果想同时使用其中的一个块且要保证高可用的话，就需要我们自己来完成类似集群文件系统的服务组合，在此我们使用的服务组合是：iscsi共享+drbd+heartbeat+nfs..
分类：
其他好文 时间：
2014-07-10 18:31:52
阅读次数：
418
1查询oracle版本select*fromv$version2oracle运行状态selectstatusfromv$instance;是RAC集群，可以使用CRS命令查看整个集群的实例运行状态：
su-oracle
crs_stat-t
分类：
数据库 时间：
2014-07-10 17:57:22
阅读次数：
433
Eureka 服务器架起来了(关于架设步骤参考博客《Linux 下 Eureka 服务器的部署》)，现在如何把我们要负载均衡的服务器(也就是从 Application Client 接收请求并返回一个响应的 Application Service)注册到 Eureka？本文以一个示例介绍 Eureka Application Service 客户端的 Eureka 生命周期(包括启动时的注册、侍服示例、关闭时的取消注册)情况，相信读完本文之后，读者可以对 Eureka 的 Application Servi...
分类：
移动开发 时间：
2014-07-10 17:37:23
阅读次数：
731
