为了解决性能问题，你登入了一台Linux服务器，在最开始的一分钟内需要查看什么？ 在Netflix我们有一个庞大的EC2 Linux集群，还有非常多的性能分析工具来监控和调查它的性能。其中包括用于云监控的Atlas，用于实例按需分析的Vector。即使这些工具帮助我们解决了大多数问题，我们有时还是得 ...
分类：
系统相关 时间：
2016-07-13 13:51:51
阅读次数：
260
说实话，我对反向代理这个概念并不熟悉，只是感觉以下要做的事是一个代理的逆向过程，故借此名词一用。 问题场景是这样的：我有两套Linux集群的访问权限，分别为A和B，它们互相独立。其中A、B集群均能访问外网，但只有A集群有公网IP，所以从外网直接登录B就不行。要解决的问题就是从外网能登录到B集群。 我 ...
分类：
其他好文 时间：
2016-06-20 12:32:58
阅读次数：
217
今天尝试了一个工具（类似azcopy）导入Linux集群中的数据到Azure(微软云)的HDInsight集群中关于Linux版本的类似于Azcopy的上传工具，还是可以通过参数修改来支持中国区Azure的文件传输的。所以这个方式应该是可行的。你可以从下面的GitHub下载这个工具。https://github.com/mat..
分类：
编程语言 时间：
2016-04-25 01:05:13
阅读次数：
5464
由于需要安装hadoop集群，有10台机器需要安装，一开始打算用SCP复制，后来觉得不可接受（实际现场可能数倍的机器集群，就是10台也不想干）。后来在网上找了，发现了clustershell和pssh这两个工具。这两个工具随便用其中一个就可以了。 环境说明：centos6.5机器10台 需求：确定一... ...
分类：
系统相关 时间：
2016-04-19 10:13:28
阅读次数：
197
集群中时间不同步有可能会让大数据的应用程序运行混乱，造成不可预知的问题，比如Hbase，当时间差别过大时就会挂掉，所以在大数据集群中，ntp服务，应该作为一种基础的服务，以下在演示在CentOS 7.2集群上配置ntp服务的过程 首先检查系统中是否安装ntp包： rpm -q ntp 我这里是只是基 ...
分类：
系统相关 时间：
2016-04-14 13:58:53
阅读次数：
328
经过了近两年的hadoop学习和使用，有必要把hadoop的学习进行一个总结，最好的方式就是以博客的方式来总结，既重新梳理以前的学习也可以和同行沟通交流，从今天开始将陆续推出hadoop零基础系列的文章， 当然总结过程中会参考相关方面的资料书，有些例子会直接来源与网络和书籍，我会在文中列出引用 考虑
分类：
系统相关 时间：
2016-03-03 14:40:48
阅读次数：
272
文章参考：http://ox0spy.github.io/debian/2014/06/26/setup-lvs-and-keepalived-on-debian/亲测可用，有一个坑，如果你对着文档做，很可能就忘记webserver要开启nginx了，servicenginxstart，哈哈哈
分类：
Web程序 时间：
2016-01-25 17:29:46
阅读次数：
307
基于VMware的虚拟Linux集群搭建-lvs+keepalived本文通过keepalived实现lvsserver的的双机热备和真实server之间的负载均衡。这方面的blog挺多，可是每一个人搭建集群的环境不同，遇到的问题也不同。本文简述配置的一些过程以及配置过程中遇到问题时的解决方式。准本...
分类：
系统相关 时间：
2015-12-24 13:28:03
阅读次数：
322
1、Linux集群主要分成三大类( 高可用集群， 负载均衡集群，科学计算集群)（下面只介绍负载均衡集群）负载均衡集群(Load Balance Cluster)负载均衡系统：集群中所有的节点都处于活动状态，它们分摊系统的工作负载。一般Web服务器集群、数据库集群和应用服务器集群都属于这种类型。负载均...
分类：
其他好文 时间：
2015-12-01 14:28:31
阅读次数：
127
Heartbeat是一个基于Linux开源的，被广泛使用的高可用集群系统。我们可以基于Heartbeat构建web高可用服务环境。本文在CentOS 6.5下做了一个简单示例，并对其日志进行了初步分析，供大家参考。...
分类：
Web程序 时间：
2015-11-12 10:06:56
阅读次数：
344
