一、数据从文件导入elasticsearch 1、数据准备： 1、数据文件：test.json 2、索引名称：index 3、数据类型：doc 4、批量操作API：bulk {"index":{"_index":"index2","_type":"type2","_id":0}} {"age":10 ...
分类：
Web程序 时间：
2020-05-18 20:54:37
阅读次数：
88
分布式部署 前期方案：web服务器(1台) + 阿里云mysql数据库(2节点) + uploads文件转移到oss文件服务器（先不删除服务器上文件）最终方案：web服务器(多台) + 阿里云mysql数据库(4+节点) + 阿里云Elasticsearch(多节点) + 阿里云Logstash分布 ...
分类：
其他好文 时间：
2020-05-18 12:34:55
阅读次数：
76
命令行标记 Logstash有以下标记，你可以使用--help标志来显示此信息。 --node.name NAME 指定此Logstash实例的名称，如果没有赋值，它将默认为当前主机名。 -f, --path.config CONFIG_PATH 从特定的文件或目录加载Logstash配置，如果给定 ...
分类：
其他好文 时间：
2020-05-15 15:41:36
阅读次数：
93
第一部分 概括 ELK是集分布式数据存储、可视化查询和日志解析于一体的日志分析平台。ELK=elasticsearch+Logstash+kibana，三者各司其职，相互配合，共同完成日志的数据处理工作。ELK各组件的主要功能如下： elasticsearch，数据存储以及全文检索； logstas ...
分类：
数据库 时间：
2020-05-14 02:03:08
阅读次数：
148
任务：从es集群a,b,c 。。。把数据迁移到新es集群d,e,f 迁移数据只是复制 需要额外3台服务器，分别部署新es集群d,e,f 和 单点logstash是迁移通道 和 kibana查询工具 （集群es复制到单点es，没试过，改天试一下） 具体部署步骤可以自行百度 或者 看我之前的随笔 主要是 ...
分类：
其他好文 时间：
2020-05-13 19:52:47
阅读次数：
157
logstash和elasticsearch是按照UTC时间的，kibana却是按照正常你所在的时区显示的，是因为kibana中可以配置时区信息。 具体看这个： 有如下两种解决办法： 1.jdbc_connection_string配置上使用CTT(Asia/shanghai)时间 或者 2.新增时 ...
分类：
数据库 时间：
2020-05-11 11:42:53
阅读次数：
299
文本是在window下搭建单机版的ELK,ES用到的版本是2.4.0（为什么用这个版本，很大一个原因是能直接用自带插件工具去下载es_head插件，非常方便），logstash用的版本是7.6.2（亲自踩坑2.4.0，足足花了一个早上，发现用2.4.0报缺少log4j和无法读取日志文件），kiban ...
1，安装logstash-output-zabbix [root@moban7 bin]# /usr/local/logstash/bin/logstash-plugin install logstash-output-zabbix 2，创建一个logstash测试文件，测试到zabbix的输出是否 ...
分类：
其他好文 时间：
2020-05-10 14:32:26
阅读次数：
59
参考样式即可，具体使用配置参数根据实际情况而定 ...
分类：
数据库 时间：
2020-05-09 18:55:15
阅读次数：
79
总结：这种适合把已有的MySQL数据导入到Elasticsearch中 有一个csv文件，把里面的数据通过Navicat Premium 软件导入到数据表中，共有998条数据 文件下载地址：https://files.cnblogs.com/files/sanduzxcvbnm/SalesJan20 ...
分类：
数据库 时间：
2020-05-09 16:40:38
阅读次数：
83
