一、前置准备： Linux命令基础 Scala、Python其中一门 Hadoop、Spark、Flume、Kafka、Hbase基础知识 二、分布式日志收集框架Flume 业务现状分析：服务器、web服务产生的大量日志，怎么使用，怎么将大量日志导入到集群 1、shell脚本批量，再传到Hdfs：实 ...
分类：
Web程序 时间：
2018-07-25 18:59:14
阅读次数：
367
进行Hadoop伪分布式搭建时，需要有一定的Linux命令基础, 因为Hadoop是搭建在Linux环境上的开源框架, Hadoop的框架最核心的设计就是：HDFS和MapReduce。 本文也主要讲述HDFS和MapReduce环境的搭建。 搭建环境： 一、虚拟机网络环境配置 1.首先移动到网络配 ...
分类：
其他好文 时间：
2018-07-19 21:20:24
阅读次数：
152
一、Linux命令（由开发人员编写的软件提供）用于实现某一类功能的指令或程序命令的执行依赖于解释器程序（例如：/bin/bash等）二、Linux命令分类1.内部命令（属于shell解释器的一部分）：由shell（用于实现用户和内核交互）自带2.外部命令（独立于shell解释器之外的程序）：用户自行安装或发行版自带GNU软件提供3.判断内部或外部命令:type例：typecd//判断cd命令类型为
分类：
系统相关 时间：
2018-06-11 15:41:24
阅读次数：
212
9.3天程序包管理0.1查看文件格式[root@CentOS7~]#file/bin/ls/bin/ls:ELF64-bitLSBexecutable,x86-64,version1(SYSV),dynamicallylinked(usessharedlibs),forGNU/Linux2.6.32,BuildID[sha1]=aa7ff68f13de25936a098016243ce57c3c9
分类：
其他好文 时间：
2018-03-21 00:11:07
阅读次数：
311
1.Touch用法：-changefiletimestamps，改变文件的时间戳格式：touch[OPTION]...FILE...常用选项：-a：仅修改文件的访问时间戳；-c,--no-create：不创建任何文件；注意：如果没有指定-c选项，touch可以创建出被指定为参数且不存在的文件；-m：仅修改文件的修改时间戳；-tstamp：..
分类：
系统相关 时间：
2017-10-18 23:15:04
阅读次数：
285
LINUX常用命令（二）目录和文件管理一、Linux命令基础1、命令分类■内部命令：继承与Shell解释器程序内部的一些特殊指令，也称为內建指令。没有单独对应的系统文件，只要Shell解释器被运行，内部指令就自动载入内存了。内部命令无需从硬盘中重新读取文件，因此执行效率更高。■..
分类：
系统相关 时间：
2017-09-06 00:30:18
阅读次数：
264
通配符 通配符是一类键盘字符 。 当查找文件夹时；当不知道真正字符或者不想键入完整名字时，常常使用通配符代替一个或多个真正字符。 * 代替0个或多个字符。 ? 代替一个字符。 [] 匹配中括号内的任意一个字符。 通配符示例： ls *.conf ls /home/*.sh ls h*.conf ls ...
分类：
系统相关 时间：
2017-05-13 23:27:51
阅读次数：
261
