一、ELK功能概览 1.检索 2.数据可视化--实时监控（实时刷新） nginx 访问量 ip地区分布图（大数据） 3.zabbix 微信联动报警 4.大数据日志分析平台（基于hadoop） 二、kabana使用方法 1.创建索引 2.discover 选择索引 3.左侧选择字段（message） ...
分类：
其他好文 时间：
2018-11-01 11:58:45
阅读次数：
246
ELK搭建实时日志分析平台 导言 ELK由ElasticSearch、Logstash和Kiabana三个开源工具组成，ELK平台可以同时实现日志收集、日志搜索和日志分析的功能。对于生产环境中海量日志信息的分析处理无疑不是一个好的解决方案。 官方网站：https://www.elastic.co/ ...
分类：
其他好文 时间：
2018-10-31 15:35:34
阅读次数：
192
距离2018年双11的购物盛典已经不到一个月了，各大电商之间的战役已经悄然打响，今年的双11仍会是一场电商鏖战，想必又会打破2017年双11近2540亿的全网成交总额记录。据统计，去年双11全天共产生快递物流高达8.5亿次，而商家发送的营销短信总量更是远超200亿条，由此可见营销短信服务在电商推广中占据重要地位。除了快递和短信，商品评价分析、平台热词分析等在电商活动中同样重要。作为商家，如何选择一
网易游戏工程师在2018年6月 Apache Kylin meetup @ 深圳场的分享，介绍了网易游戏为何选择 Apache Kylin 做为大数据在线分析平台，并基于 Kylin 所做的优化和改进等实践。 篇幅过长，原文地址 "https://www.slidestalk.com/s/Apach ...
分类：
Web程序 时间：
2018-10-16 12:02:48
阅读次数：
198
2018年9月21日，Forrester正式对外发布了2018年度的安全分析平台（SecurityAnalyticsPlatform）的厂商评估报告（即ForresterWave），这个评估类似Gartner的MQ。SAP这个细分市场是Forrester在2016年提出来的，并且在2017年第一次给出了ForresterWave评估（参见《Forrester：2017年度安全分析平台厂商评估（Fo
分类：
其他好文 时间：
2018-10-10 10:42:58
阅读次数：
257
前言 最近公司要求基于公司的hadoop平台做一个关于电信移动网络的数据分析平台，整个项目需求大体分为四大功能模块：数据挖掘分析、报表数据查询、GIS地理化展示、任务监控管理。由于页面功能较复杂，所以采用前后端分离方式开发。前端采用webpack+vue+vue-router+axios技术栈，后端 ...
分类：
其他好文 时间：
2018-09-18 22:48:59
阅读次数：
704
一、环境准备1、架构选型接下来我们进行初步的探视，利用测试环境体验下ELKStack+Filebeat，测试环境我们就不进行Kafka的配置了，因为他的存在意义在于提高可靠性。2、软件版本Filebeat6.4.0Logstash6.4.0Elasticsearch6.4.0Kibana6.4.0JDK1.8.0_1813、服务器准备IP系统角色172.18.2.100CentOS7.4.1708
分类：
其他好文 时间：
2018-09-16 23:56:25
阅读次数：
260
一、ELK介绍ELK构建在开源基础之上，让您能够安全可靠地获取任何来源、任何格式的数据，并且能够实时地对数据进行搜索、分析和可视化。最近查看ELK官方网站，发现新一代的日志采集器Filebeat，他是Beats家族其中的一员，性能超越logstash，部署简单，占用资源少，可以很方便的和logstash，ES对接。从官方网站可以看出新一代ELK架构如下：1、BeatsBeats平台集合了多种单一用
分类：
其他好文 时间：
2018-09-16 20:50:45
阅读次数：
297
ELK简介：ELK是三个开源软件的缩写，分别表示：Elasticsearch,Logstash,Kibana,它们都是开源软件。新增了一个FileBeat，它是一个轻量级的日志收集处理工具(Agent)，Filebeat占用资源少，适合于在各个服务器上搜集日志后传输给Logstash，官方也推荐此工具。Elasticsearch是个开源分布式搜索引擎，提供搜集、分析、存储数据三大功能。它的特点有：
分类：
其他好文 时间：
2018-09-06 23:57:50
阅读次数：
539
https://www.cnblogs.com/Charltsing/p/BauDuTongji.html QQ：564955427 百度统计是全球最大的中文网站流量分析平台，提供流量趋势、来源分析、转化跟踪、页面热力图、访问流等多种统计分析服务。其中有个实时访客功能，可以提供两周内最多5000条的 ...
分类：
其他好文 时间：
2018-09-02 16:11:24
阅读次数：
600
