elk+redis 搭建日志分析平台 这个是最新的elk+redis搭建日志分析平台,今年时间是2015年9月11日。 Elk分别为 elasticsearch,logstash, kibana 官网为:https://www.elastic.co/products Elasticsearch: http...
分类:
其他好文 时间:
2015-09-11 14:33:16
阅读次数:
276
实时日志统一收集的好处: ????1、快速定位集群中问题机器 ????2、无需下载整个日志文件(往往比较大,下载耗时多) ????3、可以对日志进行统计 ? ? ? a、发现出现次数最多的异常,进行调优处理 ...
分类:
其他好文 时间:
2015-09-11 12:56:09
阅读次数:
412
今天调试一个现有项目报错,[Faraday::ConnectionFailed] Connection refused - connect(2) {:host=>"localhost", :port=>"9200", :protocol=>"http"}Connection refused - co...
分类:
其他好文 时间:
2015-09-11 12:40:20
阅读次数:
174
第一节Relational DB -> Databases -> Tables -> Rows -> ColumnsElasticsearch -> Indices -> Types -> Documents -> Fields1.6小节"match" : { "abou...
分类:
其他好文 时间:
2015-09-11 12:05:53
阅读次数:
190
solr.net的使用引子最近在做一个日志系统,用普通关系型数据库做数据查询遇到了查询的瓶颈,想到了用成熟的搜索应用服务,我所知道的比较成熟的搜索应用服务有solr和es(elasticsearch),由于时间比较仓促,最后选择了比较熟悉的solr。简介SOLRSolr是一个高性能,采用Java5开...
分类:
Web程序 时间:
2015-09-10 23:56:22
阅读次数:
375
引子最近在做一个日志系统,用普通关系型数据库做数据查询遇到了查询的瓶颈,想到了用成熟的搜索应用服务,我所知道的比较成熟的搜索应用服务有solr和es(elasticsearch),由于时间比较仓促,最后选择了比较熟悉的solr。简介SOLRSolr是一个高性能,采用Java5开发,Solr基于Luc...
分类:
Web程序 时间:
2015-09-10 22:28:39
阅读次数:
218
bin/plugin -install analysis-morphology -url http://dl.bintray.com/content/imotov/elasticsearch-plugins/org/elasticsearch/elasticsearch-analysis-morphology/1.2.1/elasticsearch-analysis-morphology-1...
分类:
Web程序 时间:
2015-09-09 19:52:26
阅读次数:
183
本文描述了一个简单的case,讲解怎么在logstash进行配置,将多个日志数据流,通过redis缓存接收,再导出到elasticsearch多个索引,即一类日志数据对应一类索引。 假设有两组日志数据由日志端写入redis缓存,两组日...
分类:
其他好文 时间:
2015-09-05 20:54:54
阅读次数:
307
一、集群健康API查看集群状态信息:curl
http://localhost:9200/_cluster/health;echo查看集群节点信息:curlhttp://localhost:9200/_nodes/stats/host?pretty
分类:
其他好文 时间:
2015-09-01 00:12:37
阅读次数:
174
1. 取得某个索引中某个字段中的所有出现过的值这种操作类似于使用SQL的SELECT UNIQUE语句。当需要获取某个字段上的所有可用值时,可以使用terms聚合查询完成:GET /index_streets/_search?search_type=count
{
"aggs": {
"uniq_streets": {
"terms": {
"field": "nam...
分类:
其他好文 时间:
2015-08-28 00:49:44
阅读次数:
547