代码： import json from pyspark.sql import SparkSession from pyspark import SparkConf def trans_form(data_tuple): """ 对从es读取出来的每一条数据进行格式转换 :param data_tu ...
分类：
其他好文 时间：
2020-07-17 22:12:04
阅读次数：
101
ELK docker pull elasticsearch:6.7.1docker pull kibana:6.7.1docker pull logstash:6.7.1docker run -itd --name elasticsearch6.7.1 -p 9200:9200 -p 9300:93 ...
分类：
其他好文 时间：
2020-07-17 19:41:08
阅读次数：
58
1，准备linux虚拟机环境（CentOS 7）本次安装用的是ELK7.2.0的版本(版本一定要一致) 2，先在linux安装java环境 //查找安装列表 yum -y list java* //安装 yum install java-1.8.0-openjdk.x86_64 //完成安装后验证 ...
分类：
其他好文 时间：
2020-07-17 19:27:20
阅读次数：
81
1，讲分词器的文件夹放入es安装包的plugins，重新启动elasticsearch //查询es运行中的进程pid ps -aux|grep elasticsearch //杀死进程 kill -9 pid //使用es账户启动 nohup ./elasticsearch & 2，重启es，然后 ...
分类：
其他好文 时间：
2020-07-17 19:24:23
阅读次数：
67
1，讲分词器的文件夹放入es安装包的plugins，重新启动elasticsearch //查询es运行中的进程pid ps -aux|grep elasticsearch //杀死进程 kill -9 pid //使用es账户启动 nohup ./elasticsearch & 2，重启es，然后 ...
分类：
其他好文 时间：
2020-07-17 16:22:28
阅读次数：
69
1 ealsticsearch常用术语 Index 索引 类比mysql中的表 6.0之后 Document 文档数据 类比mysql 表中的一行数据 Field字段 类比mysql表字段 Query DSL 查询语法 2 elasticsearch crud create 创建文档 read 读取 ...
分类：
其他好文 时间：
2020-07-16 21:38:56
阅读次数：
78
1.Elasticsearch 在部署时，对 Linux 的设置有哪些优化方法？ 1、64 GB 内存的机器是非常理想的， 但是 32 GB 和 16 GB 机器也是很常见的。少于 8 GB 会适得其反。 2、如果你要在更快的 CPUs 和更多的核心之间选择，选择更多的核心更好。多个内核提供的额外并 ...
分类：
其他好文 时间：
2020-07-16 21:21:28
阅读次数：
56
1、创建索引 2、创建文档 使用PostMan调用 http://192.168.127.130:9200/my_doc/_doc/1 -> http://192.168.127.130:9200/{索引名称}/_doc/{索引ID} _doc 代表创建文档 1为索引ID，是指索引在ES中的id，而 ...
分类：
其他好文 时间：
2020-07-16 21:02:02
阅读次数：
103
本文源码：GitHub·点这里||GitEE·点这里一、集群环境搭建1、环境概览ES版本6.3.2，集群名称esmaster，虚拟机centos7。服务群角色划分说明en-mastermaster主节点：esnode1en-node01slave从节点：esnode2en-node02slave从节点：esnode3ElasticSearch基础功能和用法：MySQL数据全量和增量方式向ES搜索引
分类：
其他好文 时间：
2020-07-16 12:13:06
阅读次数：
84
步骤 1. 理解 ELK Stack 0 在设置您自己的 ELK 堆栈之前，了解一点关于该堆栈及其组件的知识会对您有所帮助。 ELK Stack 由三个组件组成：Logstash、Elasticsearch 和 Kibana。 Logstash 是一个用来管理日志的工具。它支持几乎任何类型的日志，包 ...
分类：
其他好文 时间：
2020-07-16 00:28:37
阅读次数：
106
