简介Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统(HadoopDistributedFileSystem),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(highthroughput
分类:
其他好文 时间:
2020-06-06 23:16:21
阅读次数:
84
此博客为博主学习总结,学习内容: 在分布式文件系统中创建文件并用 shell 指令查看; 利用 Java API 编程实现判断文件是否存在以及合并两个文件的内容成一个文件 本次博客记录自己操作的详细步骤 感谢厦门大学数据库实验室的实验教程[http://dblab.xmu.edu.cn/blog/2 ...
分类:
其他好文 时间:
2020-06-06 01:01:04
阅读次数:
97
1. Consul简介 Consul 是一个支持多数据中心分布式高可用的服务发现和配置共享的服务软件,由 HashiCorp 公司用 Go 语言开发,基于 Mozilla Public License 2.0 的协议进行开源。 Consul 支持健康检查,并允许 HTTP 和 DNS 协议调用 AP ...
一. kubectl概述 Kubectl是用于控制Kubernetes集群的命令行工具,通过kubectl能够对集群本身进行管理,并能够在集群上进行容器化应用的安装部署。 kubectl命令的语法如下所示: kubectl [command] [TYPE] [NAME] [flags] comand ...
分类:
Web程序 时间:
2020-06-03 13:32:01
阅读次数:
80
一、nginx包和依赖下载安装 nginx包下载地址 http://nginx.org/ nginx其他依赖安装 yum -y install gcc zlib pcre-devel openssl-devel 或者从百度网盘下载 链接:https://pan.baidu.com/share/ini ...
分类:
系统相关 时间:
2020-06-02 19:24:30
阅读次数:
116
什么是分布式系统 分布式这一概念,一直都是后端工程师绕不过去的一个坎,今天,我们就一起来看看到底什么是分布式系统,又有哪些分布式技术世我们需要学习的。 分布式系统(distributed system)是建立在网络之上的软件系统。正是因为软件的特性,所以分布式系统具有高度的内聚性和透明性。因此,网络 ...
分类:
其他好文 时间:
2020-06-02 11:00:15
阅读次数:
200
web架构 # 需记住的端口() ftp:21 ssh:22 telnet:23 rsync:873 http:80 php:9000 mysql:3306 ... LNMP架构概述 Linux Nginx MySQL PHP (代码解析器) 代码解析器各类代码: PHP (php代码) tomca ...
分类:
其他好文 时间:
2020-06-01 23:32:56
阅读次数:
141
MongoDB安装部署 逻辑结构 Mongodb 逻辑结构 MySQL逻辑结构 库database 库 集合(collection) 表 文档(document) 数据行 系统准备 关闭大页内存机制 root用户下 在vi /etc/rc.local最后添加如下代码 [root@db01 ~]# v ...
分类:
数据库 时间:
2020-05-30 18:25:58
阅读次数:
81
1、HBase安装说明 JDK1.7以上 Hadoop-2.5.0以上 Zookeeper-3.4.5 2、Hadoop2.6安装 1) 解压 tar -zxvf hadoop-2.6.0.tar.gz 2) 配置hardoop的jdk cd /root/tools/hadoop-2.6.0/etc ...
分类:
其他好文 时间:
2020-05-30 15:46:42
阅读次数:
67
安装包下载1、网上搜索redis,查找下载连接连接为http://download.redis.io/releases/redis-6.0.4.tar.gz2、使用wget下载gz包,安装成功如图所示wgethttp://download.redis.io/releases/redis-6.0.4.tar.gz3、下载完毕之后进行解压tar-zxvfredis-6.0.4.tar.gz4、进到解压
分类:
其他好文 时间:
2020-05-30 10:51:05
阅读次数:
108