Block是文件块，HDFS中是以Block为单位进行文件的管理的，一个文件可能有多个块，每个块默认是3个副本，这些块分别存储在不同机器上。块与文件之前的映射关系会定时上报Namenode。HDFS中一个块的默认大小是64M，其大小由参数dfs.block.size控制。这里面先引申几个问题出来： ...
分类：
其他好文 时间：
2020-09-03 16:43:21
阅读次数：
40
在ubuntu上直接用apt安装clangd版本太低，可以从源码编译安装，但是很耗时。 clangd提供了源https://apt.llvm.org/,可以按照源上的指令安装： bash -c "$(wget -O - https://apt.llvm.org/llvm.sh)" 但是没有合理上网， ...
分类：
系统相关 时间：
2020-09-03 16:33:13
阅读次数：
149
安装 linux nginx可以使用各平台的默认包来安装，这里介绍的是使用源码编译安装，包括具体的编译参数信息。 正式开始前，编译环境gcc g++ 开发库之类的需要提前装好，这里默认你已经装好。 ububtu平台编译环境可以使用以下指令： $ apt-get install build-essen ...
分类：
其他好文 时间：
2020-08-27 13:13:06
阅读次数：
60
写了个nginx编译安装脚本 版本：nginx-1.19.2 #!/bin/bash # 安装依赖关系包 yum -y install zlib zlib-devel openssl openssl-devel pcre pcre-devel gcc gcc-c++ autoconf automak ...
分类：
其他好文 时间：
2020-08-26 19:03:54
阅读次数：
73
环境：salt-master：centos7.8salt-minion（2台）：centos6.10salt-minion（1台）：centos7.8关闭selinux和firewalld，iptables开放4505和4506端口目的：通过salt-master实现对salt-minion的批量自动安装mysql步骤（都在master执行）：1，检测连通性salt‘*‘test.
分类：
数据库 时间：
2020-08-24 16:46:46
阅读次数：
73
服役新的节点 1、首先克隆一个新的虚拟机，里面的hadoop等环境都配好了 之后修改ip通过 root进行登录，在原本好的虚拟机上进行分发操作 之后再发java 发环境变量 在新的虚拟机上进行： 这是重新运行环境变量 之后进入hadoop删除data和logs让他变成一个全新的机器 就会发现 dat ...
分类：
其他好文 时间：
2020-08-19 19:07:03
阅读次数：
65
####首先保证Node891或Node811等版本装成功了###### /opt/bigdata/elk/node891 ################ 修改目录权限 #################### [root@vwmaster hadoop]# chown -R root:root ...
分类：
其他好文 时间：
2020-08-17 17:45:14
阅读次数：
70
1.[root@centos8 ~]#wget https://github.com/abishekvashok/cmatrix/releases/download/v2.0/cmatrix-v2.0-Butterscotch.tar 2. [root@centos8 ~]#dnf -y insta ...
分类：
其他好文 时间：
2020-08-17 17:01:41
阅读次数：
55
一、hdfs概述 介绍： 在现代的企业环境中，单机容量往往无法存储大量数据，需要跨机器存储。统一管理分布在集群上的文件系统称为分布式文件系统 。HDFS（Hadoop Distributed File System）是 Apache Hadoop 项目的一个子项目. Hadoop 非常适于存储大型数 ...
分类：
其他好文 时间：
2020-08-13 12:16:47
阅读次数：
60
一、Hadoop集群安装 1. 环境准备 （1） 准备三台机器：hadoop0(192.168.11.10)、hadoop1(192.168.11.11)、hadoop2(192.168.11.12) （2）每台机器安装好JAVA环境以及SSH打通（SSH免密登录；关闭防火墙） 2. 下载Hadoo ...
分类：
其他好文 时间：
2020-08-11 10:44:56
阅读次数：
79
