概述：Spark 程序开发，调试和运行，intellij idea开发Spark java程序。分两部分，第一部分基于intellij idea开发Spark实例程序并在intellij IDEA中运行Spark程序.第二部分，将开发程序提交到Spark local或者hadoop YARN集群运行 ...
分类：
编程语言 时间：
2021-01-08 10:56:23
阅读次数：
0
什么是druid druid是一个为OLAP查询需求而设计的开源大数据系统，druid提供低延时的数据插入，实时的数据查询 druid使用Java开发，基于Jetty提供http rest服务，也提供了Java/Python等语言的工具包 druid是一个集群系统，使用zookeeper做节点管理和 ...
分类：
其他好文 时间：
2021-01-08 10:28:10
阅读次数：
0
原文地址 1、安装环境要求 3台可以网络通信的Linux主机，并且安装了docker 安装1.12.0以上的docker 管理节点的IP地址 主机之间开放端口 2、准备3台主机 3台主机可以是物理机，虚拟机，云主机，甚至是docker machine创建的主机。并安装docker。三台主机分别是ma ...
分类：
其他好文 时间：
2021-01-07 12:28:40
阅读次数：
0
安装部署主控节点服务 -- etcd 部署master节点服务 部署etcd集群 集群规划 HDss7-12.host.com ectc lead 192.168.154.12 HDss7-21.host.com ectc follow 192.168.154.21 HDss7-22.host.co ...
分类：
其他好文 时间：
2021-01-07 11:46:58
阅读次数：
0
注意： 每个redis节点使用相同硬件的配置，相同的版本，相同的密码。 redis节点必须没有任何数据，否则分配槽位会失败。 集群规划： 原生命令手动部署集群 部署过程 安装redis并配置开启cluster功能 各个节点执行meet，实现所有节点互相通信 为每个master节点分配槽位 为每个ma ...
分类：
其他好文 时间：
2021-01-06 12:27:22
阅读次数：
0
之前搭建的是eureka单机版，现在搞个集群版。单机和集群之间要改的部分其实只是配置文件而已，步骤如下： 1.创建新的一个eurekaServer的模块，关于依赖和配置可参考已有的eurekaServer 2.先到本地的host文件配置如下的信息： 127.0.0.1 eureka7001.com ...
分类：
编程语言 时间：
2021-01-06 12:03:41
阅读次数：
0
现在服务模块要去eurekaServer集群注册了，跟单机不同的是，我们的服务模块必须得到eurekaServer集群的每个Server上注册信息，其实要改的部分其实也只是配置文件而已，如下： eureka: client: register-with-eureka: true #是否将自己注册到注 ...
分类：
编程语言 时间：
2021-01-06 12:02:37
阅读次数：
0
Go-Zero 官方短链项目教程：快速构建高并发微服务 关于 go-zero，大家可以看文档。为少认为它是中国目前最好用的 golang 微服务框架。 完整的 Go-Zero ShortUrl DevOps Demo 准备工作 我这里直接在 K8S 开发集群中部署相关实例。 生产求稳，建议大家还是买 ...
分类：
Web程序 时间：
2021-01-05 10:52:16
阅读次数：
0
#!/bin/bash data=`date '+%Y-%m-%d-%H-%M'` a=(`kubectl get deployments --all-namespaces |awk '{print $1}'| grep -v NAME`) ## 获取域名空间（NAMESPACE） b=(`kube ...
分类：
其他好文 时间：
2021-01-04 11:32:43
阅读次数：
0
● 系统环境说明 Linux环境：centos 7.2 腾讯云ES Service：7.5.1 Java：1.8.0_181 ● 集群配置 32核64GB, 3个（主节点） 50GB 高性能云盘 x1 32核64GB, 12个（数据节点） 6000GB SSD云硬盘 x2 问题异常： ES cros ...
分类：
其他好文 时间：
2021-01-02 11:30:48
阅读次数：
0
