码迷,mamicode.com
首页 >  
搜索关键字:flume 启动分析 flume源码    ( 1167个结果
Flume 1.5日志收集和存款mongodb安装结构
Flume该演示是不是说。你可以自己搜索。但现在的互联网主要是Flume 1.4前版本号的信息。Flume 1.5在轰动的大变化。假设你准备尝试,我在这里给大家介绍一下程序最小化结构,和使用MongoSink的数据被存储mongodb。完全独立的执行,没有master。没有collector(说白了...
分类:数据库   时间:2015-08-12 13:10:10    阅读次数:389
最完整的历史记录hadoop
课程主要涉及Hadoop Sqoop、Flume、Avro重要子项目的技术实战课程针对人群1、本课程适合于有一定java基础知识。对数据库和sql语句有一定了解,熟练使用linux系统的技术人员,特别适合于想换工作或寻求高薪职业的人士2、最好有Greenplum Hadoop、Hadoop2.0、Y...
分类:其他好文   时间:2015-08-10 21:59:28    阅读次数:139
【Java】【Flume】Flume-NG阅读源代码AvroSink
org.apache.flume.sink.AvroSink是用来通过网络来数据传输的。能够将event发送到RPCserver(比方AvroSource),使用AvroSink和AvroSource能够组成分层结构。它继承自AbstractRpcSink extends AbstractSin.....
分类:编程语言   时间:2015-08-10 21:56:32    阅读次数:207
flume + kafka 基本配置
apache-flume1.6 sink默认支持kafka [FLUME-2242] - Flume Sink and Source for Apache Kafka 官方给的例子很贴心,可以直接运行=,=,详细配置之后慢慢看。 a1.channels = channel1 a1.sources = src-1 a1.sinks...
分类:Web程序   时间:2015-08-10 18:18:21    阅读次数:831
_00013 一致性哈希算法 Consistent Hashing 新的讨论,并出现相应的解决
笔者博文:妳那伊抹微笑博客地址:http://blog.csdn.net/u012185296个性签名:世界上最遥远的距离不是天涯,也不是海角,而是我站在妳的面前。妳却感觉不到我的存在技术方向:Flume+Kafka+Storm+Redis/Hbase+Hadoop+Hive+Mahout+Spar...
分类:编程语言   时间:2015-08-09 09:26:51    阅读次数:161
Tomcat启动分析(我们为什么要配置CATALINA_HOME环境变量)
用文本编辑工具打开用于启动Tomcat的批处理文件startup.bat,仔细阅读。在这个文件中,首先判断CATALINA_HOME环境变量是否为空,如果为空,就将当前目录设为CATALINA_HOME的值。接着判断当前目录下是否存在bin\catalina.bat,如果文件不存在,将当前目录的父目...
分类:其他好文   时间:2015-08-08 16:11:53    阅读次数:119
Flume-1.6.0学习笔记
Flume-1.6.0学习笔记
分类:Web程序   时间:2015-08-05 22:33:33    阅读次数:164
Flume:构建高可用、可扩展的海量日志采集系统——互动出版网
这篇是计算机类的优质预售推荐>>>>《Flume:构建高可用、可扩展的海量日志采集系统》 编辑推荐 开发人员。 内容简介 本书从Flume 的基本概念和设计原理开始讲解,分别介绍了不同种类的组件、如何配置 组件、如何运行Flume Agent 等。同时,分别讨论Source、Channel 和Sink 三种核心组件,不仅仅阐述每个组件的基本概念,而且结合实际的编程案例...
分类:Web程序   时间:2015-08-04 19:28:18    阅读次数:236
【分布式计算】分布式日志导入工具-Flume
背景 Flume是Apache赞助的一个分布式日志管理系统,主要功能就是把集群中每个worker产生的日志log,collect到特定的地点。 为什么要写这篇文章呢,因为现在搜索出来的文献大多是老版本的flume,在flume1.X版本后,也就是flume-ng版本跟之前出现了很大的改动,市面上的很多文档都已经过时了,大家看的时候一定要注意这点,稍后我会提供几个比较新的,有参考价值的文章。...
分类:Web程序   时间:2015-08-04 09:30:46    阅读次数:187
flume实例二、监听目录日志上传到HDFS文件系统
一、概述 接实例一,实例一中server-aget是把日志上传保存到服务器上面,随着日志越来越大,公司启动了hadoop项目,需要把日志直接上传hdfs中保存,配置文件target_hdfs.conf如下: a2.sources = r2 a2.channels = c2 a2.sinks = k2...
分类:Web程序   时间:2015-07-31 19:52:24    阅读次数:195
1167条   上一页 1 ... 89 90 91 92 93 ... 117 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!