关于failover网上也有很多例子，但是看到的有多重做法，个人觉得，本着职责单一的原则
1、一台机子运行一个flume agent
2、一个agent 的下游sink指向一个flume agent，不要一个flume agent配置多个端口【影响性能】
下面看具体实例：
首先是flumet agent client的配置
priority越高，优先级越高，会优先使用该sink...
分类：
Web程序 时间：
2015-01-07 16:53:24
阅读次数：
220
如图所示，新建一个JAVA工程，编辑pom文件，pom文件内容如下【这里取出了parent】：
<project xmlns="http://maven.apache.org/POM/4.0.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http:/...
分类：
移动开发 时间：
2015-01-07 13:13:02
阅读次数：
759
文章发自http://www.cnblogs.com/hark0623/p/4205756.html 转载请注明flume越用越有一些疑惑，这个月中按计划是要阅读flume源码的，我希望能解决我的疑惑，另外，当疑惑解决后，我也会把过程和结论发到博客中，最终会把链接更新至当前帖子中的，疑惑如下：1、通...
分类：
Web程序 时间：
2015-01-06 13:33:59
阅读次数：
154
随着互联网高速发展,互联网软件也随之越来越多,Web应用软件如雨后春笋,发展相当迅速,BS模式的ERP,MIS,CRM等产品现在也非常普遍,这类软件均包括一些通用的功能,如:与数据库操作,日志管理,权限管理等.本框架指在解决这些问题,并将通用的功能抽离并实现.使在开发过程中,将更多的精力放在业务逻辑
分类：
Web程序 时间：
2015-01-06 11:17:14
阅读次数：
326
新的公司日志管理统一用logback，由于之前一直在用log4j，所以其实对logback这个由log4j长出来的家伙还不算陌生。首先介绍下logback的前世今生。slf4j由log4j作者Ceki开发，逐步取代apahce commons logging。logback由log4j作者Ceki开...
分类：
其他好文 时间：
2015-01-04 18:31:35
阅读次数：
259
1.商品管理 1.1创建商品、修改商品、删除商品、商品列表、条件查询 1.2商品分类2.用户管理 基本资料、收货地址、资金余额3.订单管理 订单列表、冻结、解冻、无效、修改支付状态等 4.财务管理 充值记录，用户的充值历史记录 提现记录，用户的提现历史记录 账务记录，电商平台方资金总账变动5.日志管理操作日志：商品创建、订单冻结等后台操作日志。登录日志：什么时候登录搜...
分类：
其他好文 时间：
2015-01-01 17:22:32
阅读次数：
168
2014年12月总结：这月1号新工作开始了我的大数据之旅，从.NET转向Hadoop。工作期间遇到了解决的没有解决的有各种坑，不过好在算是把整套业务给搭建了下来。大体使用的技术及流程如下：mosquittio->flume agent->flume collector->sparkstreaming...
分类：
其他好文 时间：
2014-12-31 22:50:23
阅读次数：
208
文章来自：http://www.cnblogs.com/hark0623/p/4196381.html 转载请注明需要在你的脚本前面添加nohub，后边添加&。例如下面的脚本：nohup ./flume_client.sh &nohup的作用：当你的SecureCRT会话关闭后，保证你的脚本还在Li...
分类：
其他好文 时间：
2014-12-31 20:00:06
阅读次数：
147
由于flume-ng至1.5版本仍旧没有稳定可用的类似flume-og中的taildir的功能，所以从git中https://github.com/jinoos/flume-ng-extends找了一个别人针对flume-ng实现的的taildir这个按照github上他自己说明，是没法正常使用的。...
分类：
Web程序 时间：
2014-12-29 18:07:39
阅读次数：
219
日志是应用程序运行中不可缺少的一部分，JAVA中有很多已经成熟的方案，尽管记录日志是应用开发中并不可少的功能，在 JDK 的最初版本中并不包含日志记录相关的 API 和实现。相关的 API（java.util.logging 包，JUL）和实现，直到 JDK 1.4 才被加入。因此在日志记录这一个领...
分类：
编程语言 时间：
2014-12-26 16:06:17
阅读次数：
368
