配置flume集群参考https://www.cnblogs.com/jifengblog/p/9277793.html load-balance负载均衡 介绍 负载均衡是用于解决一台机器(一个进程)无法解决所有请求而产生的一种算法。 Load balancing Sink Processor 能够 ...
分类：
Web程序 时间：
2018-07-07 20:52:50
阅读次数：
237
概述 Flume 是 Cloudera 提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的软件。 Flume 的核心是把数据从数据源(source)收集过来，再将收集到的数据送到指定的目的地(sink)。为了保证输送的过程一定成功，在送到目的地(sink)之前，会先缓存数据(chann ...
分类：
Web程序 时间：
2018-07-07 20:12:05
阅读次数：
181
1.优先队列：一种支持删除最大元素和插入元素两种操作的数据结构。 2.当一颗二叉树的每个结点都大于等于它的两个子结点时，它被称为堆有序。 3.根结点是堆有序的二叉树中的最大结点。 4.二叉堆是一组能够用堆有序的完全二叉树排序的元素，并在数组中按照层级储存（不使用数组的第一个位置）。 5.在一个二叉堆 ...
分类：
其他好文 时间：
2018-06-27 13:50:25
阅读次数：
123
Flume（一）Flume原理解析 阅读目录(Content) 一、Flume简介 二、Flume特点 三、Flume的一些核心概念 3.1、Agent结构 3.2、source 3.3、Channel 3.4、Sink 四、Flume拦截器、数据流以及可靠性 4.1、Flume拦截器 4.2、Fl ...
分类：
Web程序 时间：
2018-06-22 13:43:24
阅读次数：
251
达到 CD 音质(16bit/44.1kHZ 立体声)需要 1411.2 kbit/s的带宽，显然bluetooth A2DP 无法允许(蓝牙2.0/2.1 + EDR最大的载波率大约是2.1Mbit/s,减去协议头、干扰、功耗等因数影响，实际最大传输速率大约在1000bit/s)，所以音频数据需要... ...
分类：
其他好文 时间：
2018-06-20 21:04:59
阅读次数：
5324
http://www.cnblogs.com/34fj/p/8820094.html https://blog.csdn.net/lmalds/article/details/52400805 ...
分类：
数据库 时间：
2018-06-20 19:05:00
阅读次数：
540
gstreamer及相关插件编译完成后，会输出gst-inspect可执行文件，相关信息如下： ./gst-inspect-1.0 -h用法： gst-inspect-1.0 [选项...] [ELEMENT-NAME | PLUGIN-NAME] 帮助选项： -h, --help 显示帮助选项 - ...
分类：
其他好文 时间：
2018-06-19 16:27:14
阅读次数：
274
单独的这样来说，时间过得真的是快，6月份已经开始过了一半的时间了，我想说的事情就是这件事情，自己的学习进度变得十分的缓慢，自己在爬虫方面耗费了大量的时间自己却没有做出一些比较有效果的成绩，这件事情和以前的事情相比，是自己学习方法的不对，而不是自己学习的问题。 网页分析算法可以归纳为基于网络拓扑、基于 ...
分类：
其他好文 时间：
2018-06-15 20:04:03
阅读次数：
141
Filtering revisited 我们在前面的章节中已经提到了过滤，但是我们仅仅触及到了表面。现在我们能够向Log records添加attribute并设置sink，我们就可以构建我们需要的任何复杂的过滤。让我们考虑一下这个例子: [完整代码][1] 在这个示例中，我们初始化了两个sinks ...
分类：
其他好文 时间：
2018-06-09 19:02:19
阅读次数：
211
每个flume agent包含三个主要组件：source、channel、sink。 Source是从一些其他产生数据的应用中接收数据的活跃组件，有自己产生数据的source，不过这些source通常用于测试目的，source可以监听一个或者多个网络端口，用于接收数据或者可以从本地文件系统读取数据， ...
分类：
Web程序 时间：
2018-06-08 19:24:31
阅读次数：
895
