Linux scp 免密码 传输文件 背景介绍 最近项目是集群化部署（由 node1，node2，node3 三台 CentOS 7.4 的虚拟机构成）。 但是，涉及到跨机器同步文件的问题，想通过写shell文件实现，用 crontab 设置定时任务，定时执行改脚本。 由于每次都需要输入密码，导致定 ...
分类：
系统相关 时间：
2019-11-07 09:46:53
阅读次数：
125
1、什么是KubernetesKubernetes是Google（谷歌内部:Borg）开源的容器集群管理系统，其提供应用部署、维护、扩展机制等功能，利用Kubernetes能方便地管理跨机器运行容器化的应用，可以实现容器集群的自动化部署、自动扩缩容、维护等功能。它既是一款容器编排工具，也是全新的基于容器技术的分布式架构领先方案。2、Kubernetes架构和组件K8S集群中有管理节点与工作节点两种
分类：
Web程序 时间：
2019-08-18 21:32:40
阅读次数：
138
RPC（Remote Procedure Call，远程过程调用）是一个很大的概念。它是一种通过网络从远程计算机程序上跨语言跨平台的请求服务。RPC能省略部分接口代码的开发，可以跨机器之间访问对象（Java RMI），可以有更方便的加密和更高效的数据传输性能，而不需要了解底层网络技术的协议。RPC不 ...
分类：
Web程序 时间：
2019-08-10 14:28:12
阅读次数：
138
概念1.Kubernetes简介Kubernetes是谷歌开源的容器集群管理系统，是Google多年大规模容器管理技术Borg的开源版本，主要功能包括：基于容器的应用部署、维护和滚动升级负载均衡和服务发现跨机器和跨地区的集群调度自动伸缩无状态服务和有状态服务广泛的Volume支持插件机制保证扩展性Kubernetes发展非常迅速，已经成为容器编排领域的领导者。2.Kubernetes核心组件Kub
分类：
其他好文 时间：
2019-06-26 09:18:47
阅读次数：
140
hadoophdfs 1. HDFS写流程 2. HDFS写流程 1. HDFS写流程 HDFS写流程 副本存放策略: 上传的数据块后,触发一个新的线程,进行存放。 第一个副本:与client最近的机器(基于性能考虑) 第二个副本:跨机器存放该副本(考虑数据安全性) 第三个副本:与第一个，第二个副本 ...
分类：
其他好文 时间：
2019-06-08 01:01:44
阅读次数：
90
[toc] 1、Kubetnetes之基础介绍 Kubernetes是谷歌开源的容器集群管理系统，是Google多年大规模容器管理技术Borg的开源版本，主要功能有： 基于容器的应用部署、维护和滚动升级 负载均衡和服务发现 跨机器和跨地区的集群调度 自动伸缩 无状态服务和有状态服务 广泛的Volum ...
分类：
Web程序 时间：
2019-04-04 09:29:57
阅读次数：
316
1.定义 进程是具有一定独立功能的程序关于某个数据集合上的一次运行活动,进程是系统进行资源分配和调度的一个独立单位. 线程是进程的一个实体,是CPU调度和分派的基本单位,它是比进程更小的能独立运行的基本单位.线程自己基本上不拥有系统资源,只拥有一点在运行中必不可少的资源(如程序计数器,一组寄存器和栈 ...
分类：
编程语言 时间：
2019-01-31 17:38:12
阅读次数：
227
<!-- flowchart 箭头图标 勿删 --> java RMI即java远程服务调用，用于各个子系统之间的服务调用。最近应用到了JAVA RMI技术，所以总结一下RMI的使用，另外EJB的实现也是以Java RMI为基础核心的。RMI远程方法调用，可以跨机器通过网络调用，不过Java RMI ...
分类：
编程语言 时间：
2018-12-25 13:11:04
阅读次数：
164
1、wget 2、scp cp用于本机上复制文件，scp（secure copy）可以实现跨机器复制。 tips：想把机器A的文件scp到机器B上，当在机器B上scp连接失败时，可以在机器A上scp试下，可能有惊喜～(B上scp A B -->A上scp A B) 格式：scp 参数 源路径 目标路 ...
分类：
系统相关 时间：
2018-12-15 18:48:49
阅读次数：
238
一、SPARK-CORE 1.spark核心模块是整个项目的基础。提供了分布式的任务分发，调度以及基本的IO功能，Spark使用基础的数据结构，叫做RDD(弹性分布式数据集),是一个逻辑的数据分区的集合，可以跨机器。RDD可以通过两种方式进行创建，一种是从外部的数据集引用数据，第二种方式是通过在现有 ...
分类：
其他好文 时间：
2018-11-09 21:10:46
阅读次数：
173
