一、shell和bash shell unix Bourne shell ,bash linux Bourne again shell。bash (GNU Bourne Again Shell) 是许多Linux发行版的默认shell。 二、命令解释器的作用 解释用户输入的命令, 执行对应的操作。用 ...
分类:
系统相关 时间:
2019-05-22 09:53:02
阅读次数:
148
课程大纲(HDFS详解) Hadoop HDFS 分布式文件系统DFS简介 HDFS的系统组成介绍 HDFS的组成部分详解 副本存放策略及路由规则 命令行接口 Java接口 客户端与HDFS的数据流讲解 学习目标: 掌握hdfs的shell操作 掌握hdfs的java api操作 理解hdfs的工作 ...
分类:
其他好文 时间:
2019-04-11 16:05:57
阅读次数:
124
在Jenkinspipeline的groovy脚本中可以实现很多复杂灵活的功能,但是:1一来对java、groovy不是很熟,也不知道能不能引入一些三方库?比如搞个jdbc操作下mysql什么的。2二是自己对go和python比较熟悉,所以想能够更加灵活的实现更多的功能:比如:操作数据库,无需依赖构建宿主机必须有数据库client来靠shell操作数据库。操作gitlab,比如参数化构建,传递进来
分类:
编程语言 时间:
2019-04-09 10:54:43
阅读次数:
445
第1章 HDFS概述 1.1 HDFS产出背景及定义 1.2 HDFS优缺点 1.3 HDFS组成架构 1.4 HDFS文件块大小(面试重点) 第2章 HDFS的Shell操作(开发重点) 1.基本语法 bin/hadoop fs 具体命令 OR bin/hdfs dfs 具体命令 dfs是fs的实... ...
分类:
其他好文 时间:
2019-04-02 09:20:50
阅读次数:
267
//memstoreflush机制和flushshell命令刷新//Memstore是HBase框架中非常重要的组成部分之一,是HBase能够实现高性能随机读写至关重要的一环。深入理解Memstore的工作原理、运行机制以及相关配置,对hbase集群管理、性能调优都有着非常重要的帮助。写机制(大约)1、HBase是基于LSM-Tree模型的,2、所有的数据更新插入操作都首先写入Memstore中(
分类:
系统相关 时间:
2019-03-28 18:18:54
阅读次数:
250
HDFS的shell操作和JavaAPI的使用: WEB WEB端口50090查看SecondaryNameNode信息。可以查看Hadoop的版本,NameNode的IP,Checkpoint等信息。 WEB端口50070可以查看HDFS的信息和目录结构 SHELL 查看 创建文件夹 新建文件 查 ...
Shell操作进入hbase命令行./hbase shell显示hbase中的表:list 创建user表,包含info、data两个列族:create 'user', 'info1', 'data1'; #一种 只有一个版本create 'user', {NAME => 'info', VERSI ...
分类:
系统相关 时间:
2019-02-20 20:07:45
阅读次数:
216
2019/2/19星期二hbaseshell操作语句基本shell命令进入hbase命令行./hbaseshell显示hbase中的表list创建user表,包含info、data两个列族create‘user‘,‘info1‘,‘data1‘create‘user‘,{NAME=>‘info‘,VERSIONS
分类:
系统相关 时间:
2019-02-19 18:57:24
阅读次数:
519
第1章 HDFS概述1.1 HDFS产出背景及定义1.2 HDFS优缺点1.3 HDFS组成架构1.4 HDFS文件块大小(面试重点)第2章 HDFS的Shell操作(开发重点)第3章 HDFS客户端操作(开发重点)3.1 HDFS客户端环境准备3.2 HDFS的API操作3.2.1 HDFS文件上 ...
分类:
系统相关 时间:
2019-02-05 23:44:37
阅读次数:
345
Shell 数值运算 因为shell脚本是属于弱语言,没有变量类型的概念,所以定义变量会默认为字符串。就算看上去是一个数字,当直接进行计算时,就会出错: 所以当我们需要进行数值运算时,我们需要一些特殊的方法,在Linex中提供了好几种方法。 1. 使用 $[] 2. 使用 expr expr为Lin ...
分类:
系统相关 时间:
2019-01-30 18:30:04
阅读次数:
205