一、rabbitmq的搭建：参考rabbimq的安装及集群设置二、安装和配置haproxy1、安装haproxyyum install haproxy2、安装rsysloga. 检查rsyslog是否已安装rpm -q rsyslogb. 添加haproxy的log配置cd /etc/rsyslog...
分类：
其他好文 时间：
2015-11-26 12:25:30
阅读次数：
358
Elasticsearch是个开源分布式搜索引擎它的特点有分布式零配置自动发现索引自动分片索引副本机制restful风格接口多数据源自动搜索负载等。Logstash是一个完全开源的工具他可以对你的日志进行收集、分析并将其存储供以后使用如搜索。kibana也是一个开源和免费的工具他Kibana可以..
分类：
其他好文 时间：
2015-11-24 13:03:49
阅读次数：
253
一.环境准备角色SERVERIPlogstashagent10.1.11.31logstashagent10.1.11.35logstashagent10.1.11.36logstashcentral10.1.11.13elasticsearch10.1.11.13redis10.1.11.13kibana10.1.11.13架构图如下:整个流程如下:1)远程节点的logstashagent收集本地日志后发送到远程redis的list队..
分类：
其他好文 时间：
2015-11-23 19:18:39
阅读次数：
326
ELK“Elasticsearch、Logstash、Kibana”今天只是了解。搭建服务的文章后期待续。日志的收集和分析一直都是困扰你我的麻烦事情，虽然我们知道的是Splunk公司正是凭借着自己在这个大数据细分领域的一枝独秀，成为百亿美元级的明星公司。但是Splunk每GB高达4500美元的报价，又让..
分类：
其他好文 时间：
2015-11-20 20:12:15
阅读次数：
221
一，问题情景：我们有多台apacheserver，apache上的accesslog会通过rsyslogclient传送给rsyslogcenter汇总并展示给用户。最近一段时间，有多个用户反馈自己的accesslog不全，有丢失的现象。二,查找原因及解决办法：1,部署监控我们给一个rsyslogcenter做了一个监控，每2min钟cur..
分类：
其他好文 时间：
2015-11-20 00:25:20
阅读次数：
936
以logstash-1.1.0-monolithic.jar为例进行安装使用yum源安装好jdk包[root@localhost~]#yum--nogpgcheckinstalljdk配置系统环境变量[root@localhost~]#cd/etc[root@localhost~]#geditprofile在profile文件中添加如下代码exportJAVA_HOME=/usr/lib/jvm/jre-1.7.0-openjdk-1.7.0.5..
分类：
编程语言 时间：
2015-11-20 00:23:34
阅读次数：
223
global ( ? ? maxMessageSize="32m" ? ? workDirectory="/data1/sinawap/rsyslog"????????#定义工作目录。列队写磁盘文件的存储文件夹 ? ? preserveFQDN="on" ? ? action.reportSuspension="on"...
分类：
其他好文 时间：
2015-11-18 10:52:41
阅读次数：
732
\\ 0>?curl?-XGET?http://10.19.0.64:9200/logstash-php-2015.11.10/weibo_img_uniupload_app/_mapping?pretty
{
??"logstash-php-2015.11.10"?:?{
????"mappings"?:?{
??????"weibo_img_uniu...
分类：
移动开发 时间：
2015-11-16 19:50:54
阅读次数：
190
rsyslog 有专门的 impstats 模块，输出本身运行情况的统计； enqueued 表示进入队列的条目数， size 表示暂存在内存中的条目数， discarded.full 表示队列满丢弃的条目数， discarded.nf 表示队列将满丢弃的条目数...
分类：
其他好文 时间：
2015-11-13 16:01:18
阅读次数：
222
日志的分析和监控在系统开发中占非常重要的地位，系统越复杂，日志的分析和监控就越重要，常见的需求有: 根据关键字查询日志详情 监控系统的运行状况 统计分析，比如接口的调用次数、执行时间、成功率等 异常数据...
分类：
其他好文 时间：
2015-11-13 11:53:29
阅读次数：
571
