为了进一步打造提升（大数据躺过的坑）本微信公众平台的博文高质量水平，特邀请善于分享、主动、敢于专研尝试新技术新领域的您，一起共同维护好我们的知识小天地。目前涉及领域有：大数据领域：Hadoop、Hive、HBase、Zookeeper、Flume、Sqoop、Kafka、Spark、Storm、Ze ...
分类：
微信 时间：
2018-05-31 14:37:52
阅读次数：
383
flume安装配置 一：下载 下载地址：http://www.apache.org/dyn/closer.lua/flume/1.8.0/apache-flume-1.8.0-bin.tar.gz 二：解压 改名为flume方便以后操作 三：配置环境变量 执行： 四：配置flume 在flume的配 ...
分类：
Web程序 时间：
2018-05-29 15:01:33
阅读次数：
203
关键：查看kafka官网的userguide agent.sources = kafkaSourceagent.channels = memoryChannelagent.sinks = hdfsSink agent.sources.kafkaSource.type = org.apache.flu ...
分类：
其他好文 时间：
2018-05-29 00:28:17
阅读次数：
132
配置文件： agent.sources = r1agent.sinks = k1agent.channels = c1 ## sources configagent.sources.r1.type = org.apache.flume.source.kafka.KafkaSourceagent.so ...
分类：
其他好文 时间：
2018-05-29 00:19:15
阅读次数：
247
关键：查看kafka官网的userGuide 配置文件： agent.sources = r1agent.sinks = k1agent.channels = c1 ## sources configagent.sources.r1.type = org.apache.flume.source.ka ...
分类：
其他好文 时间：
2018-05-29 00:11:16
阅读次数：
171
>先创建Hbase表和列族< 案例1：源数据一行对应Hbase的一列存储(hbase-1.12没有问题) #说明：案例是flume监听目录/home/hadoop/flume_hbase采集到hbase；必须先在Hbase中创建表和列族 数据目录：vi /home/hadoop/flume_hbas ...
分类：
Web程序 时间：
2018-05-28 22:44:30
阅读次数：
1319
flume采集过程： #说明：案例是flume监听目录/home/hadoop/flume_kafka采集到kafka； 启动集群 启动kafka， 启动agent，flume-ng agent -c . -f /home/hadoop/flume-1.7.0/conf/myconf/flume-k ...
分类：
Web程序 时间：
2018-05-28 22:39:51
阅读次数：
345
加微信zhanglindashuju就可以观看免费观看大数据视频1，海量日志收集利器以及flume的基本介绍2，如何透彻了解spark3，mapreguce的编程模型和执行机构4，kalka的介绍与应用5，大数据分析引擎：lmpala6，大数据批处理之hive详解7，资深程序员必备技能之大数据任务调度8，大数据从入门到进阶hi数据仓库的架构9，机器学习算法基础
分类：
其他好文 时间：
2018-05-25 21:15:36
阅读次数：
128
The new integration between Flume and Kafka offers sub-second-latency event processing without the need for dedicated infrastructure. In this previous ...
分类：
Web程序 时间：
2018-05-25 14:54:21
阅读次数：
244
May 10, 2018By Suhita GoswamiNo Comments Categories: Data Ingestion Flume Kafka Use Case Traditional messaging models fall into two categories: Shared ...
分类：
其他好文 时间：
2018-05-24 13:52:10
阅读次数：
178
