[toc] 一、ELK简介 在日常运维工作中，对于系统和业务日志的处理尤为重要。今天，在这里分享一下自己部署的Filebeat+ELK开源实时日志分析平台的记录过程，有不对的地方还望指出。 简单介绍： 日志主要包括系统日志、应用程序日志和安全日志。系统运维和开发人员可以通过日志了解服务器软硬件信息、 ...
分类：
系统相关 时间：
2019-12-20 18:17:12
阅读次数：
83
第1章 Elasticsearch安装部署 1.1 下载软件包并创建工作目录 程序下载地址：https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.5.0-linux-x86_64.tar.gz 下载时间过长，建议登录 ...
分类：
其他好文 时间：
2019-12-18 10:57:27
阅读次数：
90
数据仓库架构理论和实践，数据仓库建模指南 背景 在数据仓库建模中，未经任何加工处理的原始业务层数据，我们称之为ODS（Operational Data Store）数据。在互联网企业中，常见的ODS数据有业务日志数据（Log）和业务DB数据（DB）两类。对于业务DB数据来说，从MySQL等关系型数据 ...
分类：
其他好文 时间：
2019-09-01 23:53:18
阅读次数：
193
负载均衡服务TCP端口健康检查成功，为什么在后端业务日志中出现网络连接异常信息？ 原文： https://help.aliyun.com/document_detail/127193.html?spm=a2c4g.11186623.6.606.5b7a7ee5RD6Xai 问题现象： 负载均衡后端配 ...
分类：
其他好文 时间：
2019-08-27 10:24:39
阅读次数：
92
经过半年的沉淀，加上对MySQL，redis和分布式这块的补齐，终于开始重拾面试信心，再次出征。鹅厂面试职位：go后端开发工程师，接受从Java转语言都知道鹅厂是cpp的主战场，而以cpp为背景的工程师大都对os，network这块要求特别高，不像是Java这种偏重业务层的语言.之前面试Java的公司侧重还是在数据结构、网络、框架、数据库和分布式。所以OS这块吃的亏比较大一面：基础技术面电话面试，
分类：
编程语言 时间：
2019-06-22 23:41:21
阅读次数：
133
Overview 一个在生产环境里运行的程序如果没有日志是很让维护者提心吊胆的，有太多杂乱又无意义的日志也是令人伤神。程序出现问题时候，从日志里如果发现不了问题可能的原因是很令人受挫的。本文想讨论的是如何在Java程序里写好日志。 一般来说日志分为两种：业务日志和异常日志，使用日志我们希望能达到以下 ...
分类：
其他好文 时间：
2019-06-06 13:40:42
阅读次数：
156
业务新上了一个功能，在发布的过程中，系统报出了数据库死锁异常： 死锁发生在一个事务中，事务对多个表进行了操作。在报错日志中，死锁发生在tableA与tableB。一开始怀疑此次发布的某个改动中对上面这两张表新增了select或update操作。将注意力用在排查这个问题上。排查后发现没有相关的变更，又 ...
分类：
数据库 时间：
2019-04-04 09:53:52
阅读次数：
191
1、遇到的问题 开发中常常会打印业务日志，这些日志在排查问题或跟踪调用流程时非常有用，很多业务日志并没有考虑排查问题时的便利性，看似都记录了日志，一旦出现了线上问题，排查起来特别麻烦，很多时候又不方便让用户重现问题，造成解决问题周期长甚至是无法解决问题；如果日志记录的好，可以根据关键字搜索得出一条调 ...
分类：
其他好文 时间：
2019-02-02 19:24:51
阅读次数：
420
日志记录组件 Log4j，SLF4j，Logback 日志记录级别 致命（Fatal） 严重的错误，系统无法正常运行，如硬盘空间满等。这个级别很少被用，常暗含系统或者系统的组件迫近崩溃。 错误（Error） 系统可以继续运行，但最好要尽快修复的错误。这个级别用的较多，常常伴随Java异常，错误(Er ...
分类：
其他好文 时间：
2018-12-17 16:56:24
阅读次数：
263
事情的起因来源于某个惬意的下午，从市场接收到客户反馈，部分地区客户无法打开产品页面，由于是周末且之前也发生过机房网络故障，运维并未引起重视，以为是网络问题，放置不管。但是到傍晚19点左右，情况突然变得很严重，90%的客户都在反馈无法打开产品页面； 这一下子就炸锅了。 ...
分类：
其他好文 时间：
2018-11-14 14:29:36
阅读次数：
150
