1、创建一个agent,sink类型需指定为自定义sink vi /usr/local/flume/conf/agent3.conf agent3.sources=as1 agent3.channels=c1 agent3.sinks=s1 agent3.sources.as1.type...
分类:
Web程序 时间:
2015-05-24 17:15:54
阅读次数:
342
奇怪的问题,疑惑?不用的 User agent 居然gzip不一样?
分类:
其他好文 时间:
2015-05-24 12:45:53
阅读次数:
109
背景
需要实现一个分布式监控程序,Agent把监控消息发送到Kafka,由消费者进程使用High Level API从Kafka获取消息
需求
随着Agent数量的增加,每秒产生的消息数量也在增加,考虑到High Level的API使消费者进程与分区的固定关系,所以需要使用Zookeeper来维护一个消费者的集群,使消费者可以根据Kafka分区的数量以及消费者集群的个数,动态的分配每...
分类:
系统相关 时间:
2015-05-24 11:36:47
阅读次数:
722
zabbix源码包的安装1.解压zabbix2.2的源码包cd/usrl/local/srctarzxvfzabbix-2.2.6.tar.gz2.安装zabbixcd/usr/local/src/zabbix-2.2.6./configure--prefix=/usr/local/zabbix--enable-agentmakemakeinstallln-s/usr/local/zabbix/sbin/*/usr/local/sbin/ln-s/usr/local/zabbix/..
分类:
其他好文 时间:
2015-05-24 10:14:56
阅读次数:
285
一,curl命令参数
-a/--append 上传文件时,附加到目标文件
-A/--user-agent 设置用户代理发送给服务器
- anyauth 可以使用“任何”身份验证方法
-b/--cookie cookie字符串或文件读取位置
- basic 使用HTTP基本验证
-B/--use-ascii 使用ASCII /文本传输
-c/--cookie-jar 操作结...
分类:
Web程序 时间:
2015-05-23 18:28:31
阅读次数:
184
首先,明确一下,zico将收到的agent端的数据存储在zico/data文件下,目录结构如下图所示:tdat中存储的是host列表。根据以下代码分析目录结构 public synchronized void open() { try { load(); ...
分类:
其他好文 时间:
2015-05-23 16:46:57
阅读次数:
111
现象在Mac上启动tomcat时,报了如下错误:Error: Exception thrown by the agent : java.net.MalformedURLException: Local host name unknown: java.net.UnknownHostException: XXXX: XXXX: nodename nor servname provided, or not...
分类:
编程语言 时间:
2015-05-22 21:16:40
阅读次数:
178
一、JavaMail?API简介 JavaMail?API是读取、撰写、发送电子信息的可选包。我们可用它来建立如Eudora、Foxmail、MS?Outlook?Express一般的邮件用户代理程序(Mail?User?Agent,简称MUA)。而不是像sendmail或...
分类:
编程语言 时间:
2015-05-21 22:47:50
阅读次数:
276
运维自动化saltstack是一个轻量简洁的运维自动化软件,下面说一下我的安装过程:首先第一步就是关闭你的防火墙或者是selinux,如果开启的话就给开放个端口。一:master和agent端软件安装master控制端:rpm-Uvhhttp://ftp.linux.ncsu.edu/pub/epel/6/i386/epel-release-6-8.noar..
分类:
其他好文 时间:
2015-05-21 12:55:13
阅读次数:
179
最近用Python写了个豆瓣读书的爬虫玩,方便搜罗各种美美书,分享给大家
实现功能:
1 可以爬下豆瓣读书标签下的所有图书
2 按评分排名依次存储
3 存储到Excel中,可方便大家筛选搜罗,比如筛选评价人数>1000的高分书籍;可依据不同的主题存储到Excel不同的Sheet
4 采用User Agent伪装为浏览器进行爬取,并加入随机延时来更好的模仿浏览器行为,避...
分类:
编程语言 时间:
2015-05-21 10:58:26
阅读次数:
327