一：flume介绍 Flume是一个分布式、可靠、和高可用的海量日志聚合的系统，支持在系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方（可定制）的能力。，Flume架构分为三个部分 源-Source，接收器-Sink，通道-Channel。二：配置...
分类：
其他好文 时间：
2014-06-21 08:59:50
阅读次数：
245
##Flume概述[Flume](http://flume.apache.org/)是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。支持在日志系统中定制各类数据发送方，用于收集数据;同时，Flume提供对数据进行简单处理，并写到各种数据接受方(比如文本、HDFS、Hbase等)的能力 ...
分类：
其他好文 时间：
2014-06-20 22:18:57
阅读次数：
309
前言我们时常会遇到一些 web 项目，需要从不同的数据源中抓取数据来进行分析，而这些数据源是有可能变化的，需要用户来进行动态的维护和添加。可是，大多数的 web 程序使用了应用服务器或者容器中间件来管理数据源的生命周期，因此数据源的变化自然不能够独立于程序，而需要由专业人士去进行维护，必要时还需要重...
分类：
编程语言 时间：
2014-06-18 15:48:11
阅读次数：
400
高可用，多路冗余GFS2集群文件系统搭建详解2014.06标签：GFS2 multipath 集群文件系统 cmirror实验拓扑图：实验原理：实验目的：通过RHCS集群套件搭建GFS2集群文件系统，保证不同节点能够同时对GFS2集群文件系统进行读取和写入，其次通过multipath实现node和F...
分类：
其他好文 时间：
2014-06-17 23:32:14
阅读次数：
957
如何在nagios监控tomcat，是一个比较简单又复杂的事情，简单是因为如果只监控web应用服务器的一个tomcat服务是否正常运行，那么比较简单；如果要监控tomcat的其他比如连接数比如jvm内存使用率等就比较复杂，google没有适合的监控脚本；如果要监控web应用上面的多个tomcat服务器，而且很多tomcat服务都是跳转式的，那就需要多做很多事情。 一般通常都使用tcp tomcat...
分类：
移动开发 时间：
2014-06-17 23:21:12
阅读次数：
392
前言：上文介绍了高可用集群的基本概念，下面让我们来试试用两台提供web服务的虚拟机来实现一个小小的高可用集群吧～首先，配置一个高可用集群的前提有：1.至少两个节点；2.共享存储（为了提供的页面一致，需要在后端用某些机制来实现。这里我们就做个简单的实验，后端存储先不..
分类：
其他好文 时间：
2014-06-17 17:23:46
阅读次数：
262
http://www.lanceyan.com/tech/mongodb/mongodb_repset1.html在上一篇文章《搭建高可用MongoDB集群（一）——配置MongoDB》提到了几个问题还没有解决。主节点挂了能否自动切换连接？目前需要手工切换。主节点的读写压力过大如何解决？从节点每个上...
分类：
数据库 时间：
2014-06-17 13:34:35
阅读次数：
467
http://www.lanceyan.com/tech/mongodb_repset2.html在上一篇文章《搭建高可用mongodb集群（二）—— 副本集》介绍了副本集的配置，这篇文章深入研究一下副本集的内部机制。还是带着副本集的问题来看吧！副本集故障转移，主节点是如何选举的？能否手动干涉下架某...
分类：
数据库 时间：
2014-06-17 13:11:49
阅读次数：
341
http://www.lanceyan.com/tech/arch/mongodb_shard1.html按照上一节中《搭建高可用mongodb集群（三）—— 深入副本集》搭建后还有两个问题没有解决：从节点每个上面的数据都是对数据库全量拷贝，从节点压力会不会过大？数据压力大到机器支撑不了的时候能否做...
分类：
数据库 时间：
2014-06-17 13:07:58
阅读次数：
549
前言：在很多场景中，服务的不间断及高可用性是非常重要的。不光要有负载均衡机制，虽然它在一定的场景中能实现一定的高可用性。（出门左转有过介绍）当其中的一台RealServer宕机后，客户多刷新几次页面，调度器还是能将请求转到其他的服务器上，不至于彻底挂掉。但是当调度器..
分类：
其他好文 时间：
2014-06-16 16:45:12
阅读次数：
230
