能与原理介绍在Kafka官网中这么描述AdminClient：The AdminClient API supports managing and inspecting topics, brokers, acls, and other Kafka objects. 具体的KafkaAdminClien... ...
分类：
编程语言 时间：
2020-02-23 16:36:20
阅读次数：
446
Spark 集群模式 系统当前支持几种集群管理器： Standalone – 包含在spark中的一个简单集群管理器，它使得设置一个集群很容易。 Apache Mesos – 一个通用集群管理器，也能运行Hadoop MapReduce 和 service 应用。 Hadoop YARN – the ...
分类：
其他好文 时间：
2020-02-22 14:09:44
阅读次数：
86
Spark 提交应用 Spark’s bin 目录的spark-submit 脚本用于在一个集群上启动应用。它能通过统一的接口使用所有Spark支持的集群管理器。你不必为每个特别配置你的应用。 统一语法如下： ./bin/spark-submit \ --class <main-class> \ - ...
分类：
其他好文 时间：
2020-02-22 13:53:33
阅读次数：
73
什么是Docker和kubernetes？ Docker：Docker是一个开源的应用容器引擎，开发者可以打包他们的应用及依赖到一个可移植的容器中，发布到流行的Linux机器上，也可实现虚拟化。 kubernetes：是一个开源的容器集群管理系统，可以实现容器集群的自动化部署、自动扩缩容、维护等功能 ...
分类：
Web程序 时间：
2020-02-19 17:20:39
阅读次数：
72
docker-machime和compose、swarm被称为docker三剑客。docker-machine是解决docker运行环境问题，之前已经研究过，下面研究compose和swarm。 1.Docker Compose dcoker-compose主要是解决本地docker容器编排问题。当 ...
分类：
其他好文 时间：
2020-02-18 23:26:20
阅读次数：
152
spark核心概念 我们之前介绍了spark的核心RDD，它是spark操作的基本单元。但是对于spark集群来说你还需要它的其它概念，比如我们操作RDD的时候，资源由谁来管理、任务由谁来执行等等。 + + + + + + + + + 东西有点多，我们可以梳理一下。假设我们有一个应用程序：appli ...
分类：
其他好文 时间：
2020-02-18 23:23:35
阅读次数：
169
web界面（Dashboard）之前在kubernetes中完成的所有操作都是通过命令行工具kubectl完成的，为了提供更丰富的用户体验，kubernetes还开发了一个基于web的用户界面（Dashboard）。用户可以使用Dashboard部署容器化的应用，还可以监控应用的状态，执行故障排查以及管理kubernetes中各种资源。在kubernetesDashboard中可以查看集群中应用的
分类：
Web程序 时间：
2020-02-08 09:59:45
阅读次数：
294
简要介绍： 官方定义1：Docker是一个开源的应用容器引擎，开发者可以打包他们的应用及依赖到一个可移植的容器中，发布到流行的Linux机器上，也可实现虚拟化。 官方定义2：k8s是一个开源的容器集群管理系统，可以实现容器集群的自动化部署、自动扩缩容、维护等功能。 与传统技术对比： 接下来我们看两张 ...
分类：
Web程序 时间：
2020-02-06 01:12:57
阅读次数：
96
版本：4.0.8环境准备 准备 6台(51-56) redis服务器 以默认配置运行redis服务即可 一.创建Redis集群1.启用集群功能( 51-56 都要配置)]# netstat -antupl |grep :6379（要有东西）]# /etc/init.d/redis_6379 stop ...
分类：
其他好文 时间：
2020-02-04 20:19:37
阅读次数：
79
一 kubectl介绍 1.1 kubectl概要 kubectl控制Kubernetes集群管理器，使用Kubernetes命令行工具kubectl在Kubernetes上部署和管理应用程序。使用kubectl，您可以检查群集资源; 创建，删除和更新组件; 看看你的新集群; 并提出示例应用程序。 ...
分类：
其他好文 时间：
2020-01-30 19:02:58
阅读次数：
455
