如果安装时或者工作中有问题，可以看错误日志分析问题原因： 1005：创建表失败 1006：创建数据库失败 1007：数据库已存在，创建数据库失败 1008：数据库不存在，删除数据库失败 1009：不能删除数据库文件导致删除数据库失败 1010：不能删除数据目录导致删除数据库失败 1011：删除数据库 ...
分类：
数据库 时间：
2019-01-11 00:45:05
阅读次数：
164
为什么用到ELK： 一般我们需要进行日志分析场景：直接在日志文件中 grep、awk 就可以获得自己想要的信息。但在规模较大的场景中，此方法效率低下，面临问题包括日志量太大如何归档、文本搜索太慢怎么办、如何多维度查询。需要集中化的日志管理，所有服务器上的日志收集汇总。常见解决思路是建立集中式日志收集 ...
分类：
其他好文 时间：
2019-01-10 15:37:36
阅读次数：
140
一、ELK搭建篇 官网地址:https://www.elastic.co/cn/ 官网权威指南:https://www.elastic.co/guide/cn/elasticsearch/guide/current/index.html 安装指南：https://www.elastic.co/gui ...
分类：
其他好文 时间：
2019-01-10 15:35:16
阅读次数：
219
有两个海量日志文件存储在hdfs上， 其中登陆日志格式：user，ip，time，oper（枚举值：1为上线，2为下线）； 访问之日格式为：ip，time，url，假设登陆日志中上下线信息完整，切同一上下线时间段内是用的ip唯一， 计算访问日志中独立user数量最多的前10个url，用MapRedu... ...
分类：
其他好文 时间：
2019-01-09 23:33:20
阅读次数：
343
介绍：&emsp本次项目是基于企业大数据经典案例项目（大数据日志分析），全方位、全流程讲解大数据项目的业务分析、技术选型、架构设计、集群规划、安装部署、整合继承与开发和web可视化交互设计。一、业务需求 （一）捕获用户浏览日志信息 （二）实时分析前20名流量最高的新闻话题 （三）实时统计当前线上已曝光的新闻话题&
分类：
Web程序 时间：
2019-01-09 20:29:53
阅读次数：
245
这个脚本是基于pt-query-digest做的日志分析脚本，变成可视化的格式。 目录结构是 ./mysql_data/log./mysql_data/log/tmp./slow_query 解析之后显示的结果： ...
分类：
数据库 时间：
2019-01-08 12:17:08
阅读次数：
232
Centos7.5搭建ELK 6.5.0日志分析平台 1. 简介 工作工程中，不论是开发还是运维，都会遇到各种各样的日志，主要包括系统日志、应用程序日志和安全日志，对于开发人员来说，查看日志，可以实时查看程序的运行错误，以及性能分析，通常，一个大中型的应用程序会被部署到多台服务器，那日志文件也会分散 ...
分类：
其他好文 时间：
2019-01-04 12:39:59
阅读次数：
192
最近一位朋友发我一张Exchange报错的截图，所最近这个错误一直反复出现，让我帮忙看一下。通过截图中的报错信息，我们可以看到，‘DailyPerformanceLogs’这个文件夹已经达到了最大设置的值。而这个错误就是由ExchangeDiagnosticservice认为这有可能会有数据丢失，所以才抛出错误日志。分析到这里我们就可以想到有两种解决方法：禁用ExchangeDiagnostics
分类：
其他好文 时间：
2018-12-29 19:43:09
阅读次数：
228
pt-query-digest[OPTIONS][FILES][DSN]--create-review-table当使用--review参数把分析结果输出到表中时，如果没有表就自动创建。--create-history-table当使用--history参数把分析结果输出到表中时，如果没有表就自动创建。--filter对输入的慢查询按指定的字符串进行匹配过滤后再进行分析--limit限制输出结果百
分类：
其他好文 时间：
2018-12-29 17:17:52
阅读次数：
246
