一、ELK基础1、ELK简介ELK本质上是三个软件的组合,通过这三个软件的组合可以实现构建一个日志的收集、分析、展示的平台,也就是说借助于ELK可以实现把收集到的日志信息以饼图、柱形图、曲线图等直观的方式展示出来。ELK的三个组件如下:kibana:这个组件用来展示数据,用户访问的时候是访问kibanaelaticsearch简称es:用来存储数据的,kibana中所展示的数据都是来自于eslog
分类:
其他好文 时间:
2020-12-15 12:56:41
阅读次数:
7
Docker版EKL安装记录文档 拉取已下三个镜像 docker.io/logstash 7.5.2 b6518c95ed2f 6 months ago 805 MB docker.io/kibana 7.5.2 a6e894c36481 6 months ago 950 MB docker.io/ ...
分类:
其他好文 时间:
2020-11-24 12:12:14
阅读次数:
8
#概述 es/kibana 7.4.2 enable security docker 19.x.y requirment #resource limits /etc/security/limits.d/20-nproc.conf #* soft nproc 4096 root soft nproc ...
分类:
其他好文 时间:
2020-11-21 11:57:04
阅读次数:
6
1. 产品的架构是数据采集到 kafka,由 flink 读取,送入ES 2. 这个过程中,涉及: kafka分区数,flink并行度,ES 分区数和副本 3. kafka 分区数决定了后面 flink 的并行度,最好是 kafka 的分区数和 flink 的并行度一致 4. 写入 ES 时,需要先 ...
分类:
其他好文 时间:
2020-11-16 14:01:57
阅读次数:
18
Elasticsearch系列 00-ElasticSearch之-介绍 01-ElasticSearch之-安装 02-ElasticSearch之-插件介绍 03-ElasticSearch之-ElasticSearch-head 04-ElasticSearch之-安装Kibana 05-El ...
分类:
其他好文 时间:
2020-11-16 13:48:01
阅读次数:
9
准备两个linux宿主机- linux-node1: Elasticsearch + Logstash + Kibana linux-node2: Logstash + redis linux-node1 安装 ELK 配置logstash将redis数据送给ES [root@linux-node1 ...
分类:
其他好文 时间:
2020-11-12 13:59:11
阅读次数:
7
微博众筹的架构设计导读:我们每一天都能感受到互联网金融的成长和进步,在6月19日,微博商业产品部联合天弘基金(余额宝),小米支付、还有创业公司付钱拉等金融技术团队策划了首届互联网金融系统沙龙,围绕在互联网金融过程中碰到核心技术架构、系统安全、数据一致性、业务开发模式等与业界进行分享及交流。本文是陈杰在本次沙龙的演讲,授权高可用架构首发。陈杰,新浪微博资深系统架构师,毕业于清华大学化学系,从2004
分类:
其他好文 时间:
2020-11-08 17:28:37
阅读次数:
20
创建容器elasticsearch docker run --name elasticsearch -p 9200:9200 -p 9300:9300 -e "discovery.type=single-node" -d elasticsearch:7.2.0 安装analysis-ik中文分词插件 ...
分类:
其他好文 时间:
2020-11-06 02:51:09
阅读次数:
32
#1:下载 wget https://artifacts.elastic.co/downloads/kibana/kibana-7.9.2-linux-x86_64.tar.gz 点击进入官网 安装手册 #2:解压 tar -zxvf kibana-7.9.2-linux-x86_64.tar.gz ...
分类:
其他好文 时间:
2020-10-24 10:07:11
阅读次数:
26
前期准备:1、一套k8s集群2、镜像准备3、harbor仓库4、镜像制作文件5、字签证书镜像下载dockerpullelasticsearch:7.6.2dockerpullfilebeat:7.6.2dockerpullkibana:7.6.2因为这边需要用到elasticserach的安全验证功能模块,所以需要对elasticserach和kibana镜像有所修改编辑elasticsearch
分类:
其他好文 时间:
2020-10-21 20:51:22
阅读次数:
19