码迷,mamicode.com
首页 >  
搜索关键字:hadoop 集群    ( 32537个结果
ubuntu18安装Kubernetes 1.20.5
在以前的文章 Ubuntu 18 Kubernetes集群的安装和部署 以及Helm的安装 和 Centos 使用kubeadm安装Kubernetes 1.15.3,由于某些原因需要更新版本,索性直接安装最新的版本来试一下。 1.Install 1.安装并启用 Docker sudo apt in ...
分类:Web程序   时间:2021-04-06 15:02:04    阅读次数:0
PySpark第一篇.PySpark简介
1.Spark概述 Apache Spark是一个闪电般快速的实时处理框架。它进行内存计算以实时分析数据。由于 Apache Hadoop MapReduce 仅执行批处理并且缺乏实时处理功能,因此它开始出现。因此,引入了Apache Spark,因为它可以实时执行流处理,也可以处理批处理。 除了实 ...
分类:其他好文   时间:2021-04-06 15:01:09    阅读次数:0
Hadoop序列化
2.1 序列化概述 1)什么是序列化 序列化就是把内存中的对象,转换成字节序列(或其他数据传输协议)以便于存储到磁盘(持久化)和网络传输。 反序列化就是将收到字节序列(或其他数据传输协议)或者是磁盘的持久化数据,转换成内存中的对象。 2)为什么要序列化 一般来说,“活的”对象只生存在内存里,关机断电 ...
分类:其他好文   时间:2021-04-06 14:52:31    阅读次数:0
Zookeeper的数据结构及命令行客户端
zookeeper特性 1、Zookeeper:一个leader,多个follower组成的集群 2、全局数据一致:每个server保存一份相同的数据副本,client无论连接到哪个server,数据都是一致的 3、分布式读写,更新请求转发,由leader实施 4、更新请求顺序进行,来自同一个cli ...
分类:其他好文   时间:2021-04-06 14:38:48    阅读次数:0
docker建立redis集群(多分片+多副本)
# 整理下docker 创建redis集群多分片shards、多副本replicas的命令 # 分片平均系统数据,副本保证读写分离,docker pull redisdocker rm redis-node1 redis-node2 redis-node3 redis-node4 redis-nod ...
分类:其他好文   时间:2021-04-06 14:07:09    阅读次数:0
MapReduce概述
1.1 MapReduce定义 MapReduce 是一个分布式运算程序的编程框架,是用户开发“基于 Hadoop 的数据分析 应用”的核心框架。 MapReduce 核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序,并发运行在一个 Hadoop 集群上。 1.2 Ma ...
分类:其他好文   时间:2021-04-05 12:32:51    阅读次数:0
mvn打包jar包到本地仓库
mvn install:install-file -DgroupId=com.hadoop.XXXXX -DartifactId=hadoop-XXXXX -Dversion=0.4XXXXX -Dpackaging=jar -Dfile=/hadoopXXXX.jar ...
分类:编程语言   时间:2021-04-05 12:04:49    阅读次数:0
Oracle 的简单了解
Oracle 的简单了解 目录 一,认识 完整的Oracle 数据库通常有两个部分组成:Oracle数据库和数据库实例。 数据库是一系列物理文件的集合(数据文件,控制文件,联机日志,参数文件等); Oracle 数据库实例则是一组Oracle 后台进程/线程以及在服务器分享的共享内存区。 在启动Or ...
分类:数据库   时间:2021-04-05 11:52:03    阅读次数:0
如何使用VPC高效管理你的K8S集群
k8s全称kubernetes,这个名字大家应该都不陌生,他的魅力是要您去投入生产环境才能感受得到,越来越多公司正在拥抱K8S并主导了很多业务。 由于很多公司开始数字化转型,慢慢的很多业务都往微服务架构发展,这使得自己的集群会变得越来越庞大,业务节点的数量也相继增多,如何高效管理K8S集群是很多公司 ...
分类:其他好文   时间:2021-04-05 11:48:00    阅读次数:0
Redis:集群部署demo和主从复制
一,主从复制 概念: 主从复制,是指将一台Redis服务器的数据,复制到其他的Redis服务器。前者称为主节点(master/leader),后者称为从节点(slave/follower);数据的复制是单向的,只能由主节点到从节点,Master以写操作为主,Slave以读为主; 默认情况下,每台Re ...
分类:其他好文   时间:2021-04-02 12:53:09    阅读次数:0
32537条   上一页 1 ... 20 21 22 23 24 ... 3254 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!