主要补充内容: 1.同步多表 2.配置的参数个别说明 3.elasticsearch的"_id"如果有相同的,那么会覆盖掉,相同"_id"的数据只会剩下最后一条。所以还是用数据表中主键自增的id比较好,当然如果有需要也可以自己改变成别的UUID之类的。 elasticsearch默认的"_type" ...
分类:
其他好文 时间:
2020-02-28 18:29:59
阅读次数:
64
com.mysql.jdbc.Driver not loaded. Are you sure you've included the correct jdbc driver in :jdbc_driver_library? https://www.cnblogs.com/Hackerman/p/11 ...
分类:
数据库 时间:
2020-02-27 00:38:38
阅读次数:
178
说明:本文为Windows环境下的相关安装示例,适用于需要用Logstash和Logstash-input-jdbc将数据从数据库导入到Elasticsearch中的场景。 一、前置条件 电脑上安装有JDK8或者以上版本,安装有ElasticSearch,并启动。 二、安装并验证Logstash 1 ...
分类:
数据库 时间:
2020-02-24 13:23:03
阅读次数:
69
需求1.开发人员不能登录线上服务器查看日志2.各个系统都有日志,日志分散难以查找3.日志数据量大,查找慢,数据不够实时解决办法:部署ELK平台ELK介绍ELK是三个开源软件的缩写,分别表示:Elasticsearch,Logstash,Kibana,它们都是开源软件。新增了一个FileBeat,它是一个轻量级的日志收集处理工具(Agent),Filebeat占用资源少,适合于在各个服务器上搜集日志
分类:
其他好文 时间:
2020-02-18 09:40:00
阅读次数:
367
Elasticsearch(ES)是一个基于Lucene构建开源分布式搜索引擎并提供Restful接口。 Es是一个分布式文档数据库(JSON数据格式存储,类似MongoDB),JSON中的每个字段数据都可作为搜索条件,并且能够扩展至数以百计的服务器存储以及处理PB(PetaByte)级的数据。可在 ...
分类:
其他好文 时间:
2020-02-17 11:52:56
阅读次数:
74
1. 从Spring Boot下载项目 https://spring.io/guides/gs/accessing-data-mysql/ 2. 配置Spring Boot连接MySQL(位置:resources/application.properties) spring.jpa.hibernat ...
分类:
数据库 时间:
2020-02-13 21:15:32
阅读次数:
87
课程搜索需求分析 需求分析 1、根据分类搜索课程信息。2、根据关键字搜索课程信息,搜索方式为全文检索,关键字需要匹配课程的名称、 课程内容。3、根据难度等级搜索课程。4、搜索结点分页显示。 搜索流程 1、课程管理服务将数据写到MySQL数据库2、使用Logstash将MySQL数据库中的数据写到ES ...
分类:
其他好文 时间:
2020-02-06 14:47:40
阅读次数:
111
ELK版本:elasticsearch-5.2.2 kibana-5.2.2 logstash-2.4.1 all plugins 部署环境为单台服务器,未配置集群 一、官网下载地址:https://www.elastic.co/downloads 二、elasticsearch安装 1、由于安装E ...
分类:
其他好文 时间:
2020-01-31 00:40:19
阅读次数:
87
[TOC] ELK 0、ELK概述 | 角色 | 套接字 | | | | | kibana | 192.168.80.20:5601 | | elasticsearch | 192.168.80.20:9200 | | logstash | 192.168.80.10:9600 | 概述 我们在学习 ...
分类:
其他好文 时间:
2020-01-26 19:12:31
阅读次数:
90
创建模版使用 devtools 创建模板,或者创建的索引以 logstash开头,确保location类型为geo_point。12345678910111213141516171819202122232425262728293031323334353637383940414243444546474... ...
分类:
其他好文 时间:
2020-01-21 23:52:38
阅读次数:
156