一、公众号类型和注册 微信公众号目前有三种，订阅号、服务号、企业号，另外还有一种后来推出的和公众号带点关系的小程序。订阅号、服务号和企业号的功能区别如下（更多详细区别戳 参考链接）：参考链接 各种类型公众号的区别： 在我们微信的日常使用中可以看到，订阅号会集中放置在“订阅号”中，不会直接出现在聊天栏 ...
分类：
微信 时间：
2021-04-19 14:43:27
阅读次数：
0
0、题记本文建立在干货|LogstashGrok数据结构化ETL实战上，并专注于在Grok中使用自定义正则表达式。有时Logstash没有我们需要的模式。幸运的是，我们有正则表达式库：Oniguruma。Oniguruma是一个灵活的正则表达式库。它包含多种语言的不同正则表达式实现的特性。Github地址：https://github.com/kkos/oniguruma1、基础再认知Logsta
分类：
其他好文 时间：
2020-07-31 01:08:58
阅读次数：
76
0、题记日志分析是ELK最常用、最核心业务场景之一。如果你正在使用ElasticStack并且正尝试将自定义Logstash日志映射到Elasticsearch，那么这篇文章适合你。Logstash写入ES之前的中间数据处理过程一般叫做：数据ETL或者数据清洗。本文重点介绍数据清洗环节的非结构数据转化为结构化数据的——Grok实现。1、认知前提老生常谈，夯实基础认知。ELKStack是三个开源项目
分类：
其他好文 时间：
2020-07-31 01:06:57
阅读次数：
77
input { syslog{ port=>514 } } filter { grok{ match=>{ "message"=>"(?<AAAAFENG>(?<=TYPE=\[Sys)(.{1}))" } } if[AAAAFENG]=="1"{ mutate { add_field => { " ...
分类：
其他好文 时间：
2020-07-11 17:32:30
阅读次数：
112
源地址：（https://github.com/logstash-plugins/logstash-patterns-core/blob/master/patterns/grok-patterns）USERNAME [a-zA-Z0-9._-]+ USER %{USERNAME} EMAILLOCA ...
分类：
其他好文 时间：
2020-07-10 14:57:23
阅读次数：
118
Logstash简介 Logstash是具有实时流水线功能的开源数据收集引擎。Logstash可以动态统一来自不同来源的数据，并将数据标准化到选择的目标位置。清除所有数据并使其民主化，以用于各种高级下游分析和可视化用例。 虽然Logstash最初推动了日志收集方面的创新，但其功能远远超出了该用例。任 ...
分类：
其他好文 时间：
2020-06-30 00:51:56
阅读次数：
90
pgmetrics 是基于golang 编写的一个灵活的pg性能分析cli，我们可以方便的看到关于pg 以及系统的一些metrics 使用简单，支持human，json，csv 等格式 下载 参考以下地址https://github.com/rapidloop/pgmetrics/releases ...
分类：
其他好文 时间：
2020-03-03 12:44:19
阅读次数：
132
[TOC] 1、ES基本操作 Elasticsearch的概念 1. 索引 类似于Mysql中的数据库 2. 类型 类似于Mysql中的数据表 3. 文档 存储数据 ES&kibana 测试Web接口 1. 浏览器访问 2. Kibana操作： 出现下图所示的效果，说明kibana和ES联动成功。 ...
分类：
其他好文 时间：
2020-01-27 17:29:26
阅读次数：
80
grok 的语法编写起来还是有点吃力的，但是使用grokdebug可以提高我们排查问题的效率，同时目前也有docker 版本了 以下是一个简单的试用 环境准备 docker-compose 文件 实际上直接使用docker 跑就可以了，但是比较喜欢使用docker-compose 运行单机服务 实际 ...
分类：
其他好文 时间：
2020-01-15 21:11:59
阅读次数：
473
最近grok_exporter 打不了1.0 版本目前还是rc ，但是很期待的对于多log 文件的支持已经有了，很不错 以下是一个简单的试用 环境准备 v1.0.0.RC2 docker 镜像 FROM ubuntu:16.04 LABEL Name="grok_exporter" LABEL Ve ...
分类：
其他好文 时间：
2020-01-14 20:56:26
阅读次数：
123
