知识体系: 一、Linux基础 二、Hadoop的背景知识与起源 三、搭建Hadoop环境 四、Apache Hadoop的体系结构 五、HDFS 六、MapReduce 七、MapReduce编程案例 八、NoSQL数据库之:HBase 九、数据分析引擎之:Hive 十、数据分析引擎之:Pig 十 ...
分类:
系统相关 时间:
2018-02-02 14:19:59
阅读次数:
244
序号符号描述1>或1>输出重定向,会清空文件之前的内容2>>或1>>追加输出重定向,在文件尾部追加内容,不会清空文件之前的内容3<或<0输入重定向,会清空文件之前的内容4<<或<<0追加输入重定向,在文件尾部追加内容,不会清空文件之前的内容52>错误输出重定向,会清空文件之前的内容62>>错误追加输出重定向,在文件尾部追
分类:
系统相关 时间:
2018-02-02 14:18:44
阅读次数:
139
Linux系统的rm命令太危险,一不小心就会删除系统文件。写一个shell脚本来替换系统的rm命令,要求当删除一个文件或者目录时都要做一个备份,然后再删除。假设有一个大的分区/data/,每次删除文件或者目录前,都要在/data/下面创建一个隐藏目录,以日期/时间命名,比如/data/.201802021054,然后把所有删除的文件同步到该目录下面,可以使用rsync -R把文件路径一同同步答案:
分类:
系统相关 时间:
2018-02-02 14:17:28
阅读次数:
411
默认JDK 安装: sudo apt-get update sudo apt-get install default-jre Oracle JDK 安装: 1、设置 PPA sudo add-apt-repository ppa:webupd8team/java sudo apt-get updat ...
分类:
系统相关 时间:
2018-02-02 14:13:24
阅读次数:
220
安装Nginx依赖库(ubuntu平台) 最近域名通过了备案, 想着应用总不能带着端口号访问吧, 于是在网上踩了很多坑, 终于找到了一步直达的方法,起码这一次很顺利的实现了 安装gcc g++的依赖库 ubuntu平台: centeros平台: 安装pcre依赖库 安装zlib依赖库 安装ssl依赖 ...
分类:
系统相关 时间:
2018-02-02 14:10:09
阅读次数:
151
一、前言 需求:由于LVS演练需要,需要配置两张linux OS网卡,而且是不同网段。 准备: 物理机:单网卡 VMware:centos 6.8 二、配置 第一步:新建虚拟机VMware,centos 6.8,默认有一张网卡eth0。配置的NAT模式,如图: 我这里NAT模式设置的网段是192.1 ...
分类:
系统相关 时间:
2018-02-02 14:09:46
阅读次数:
217
printf格式化输出 基本格式 常用格式替换符 %s 字符串 %f 浮点格式 %c ASCII字符,即显示对应参数的第一个字符 %d,%i 十进制整数 %o 八进制值 %u 不带正负号的十进制值 %x 十六进制值(a-f) %X 十六进制值(A-F) %% 表示%本身 常用转义字符 \a 警告字符 ...
分类:
系统相关 时间:
2018-02-02 14:09:28
阅读次数:
159
1.vi和vim 在 Linux 的世界中,绝大部分的配置文件都是以 ASCII 的纯文本形态存在,因此利用简单的文字编辑软件就能够修改设定了! 常常听到的就有: emacs, pico, nano, joe, 与 vim 等等(注1)。 2.vi的使用 基本上 vi 共分为三种模式,分别是『一般模 ...
分类:
系统相关 时间:
2018-02-02 14:07:07
阅读次数:
243
1.查看你的系统中自带的有哪些配色方案,在shell中执行命令: ls -l /usr/share/vim/vim70/colors/ 可以看到列出的方案,我们以“desert”方案为例。 2.在你的家目录下创建.vimrc,内容如下: set tabstop=4 set softtabstop=4 ...
分类:
系统相关 时间:
2018-02-02 14:06:33
阅读次数:
242
1. 安装 打开终端,输入 结果: 输入指令,进行安装 2. 检查安装是否完成 启动redis 如下: 检查Redis是否启动 结果 127.0.0.1 是本机 IP ,6379 是 redis 服务端口。现在我们输入 PING 命令、 以上说明我们已经成功安装了redis! 参考博文:https: ...
分类:
系统相关 时间:
2018-02-02 11:56:56
阅读次数:
224
使用git add添加要提交的文件的时候,如果文件名是中文,会显示形如274\232\350\256\256\346\200\273\347\273\223的乱码。 解决方案:在bash提示符下输入: core.quotepath设为false的话,就不会对0x80以上的字符进行quote。中文显示 ...
分类:
系统相关 时间:
2018-02-02 11:52:19
阅读次数:
218
如何在Start-Job的Scriptblock里传参?方法1:利用本地变量,从一个可扩展的字符串,使用[scriptblock]::create方法创建脚本块:$v1 = "123"
$v2 = "asdf"
$sb = [scriptblock]::Create("Write-Host
分类:
系统相关 时间:
2018-02-02 11:46:55
阅读次数:
274
window-->preferences-->team-->IgnoredResource-->AddPattern-->
分类:
系统相关 时间:
2018-02-02 11:41:15
阅读次数:
223
cd 目录 跳转至目录ls 查看所有python 文件名.py 进行单测(测试详情页)python run.pyc --debug --config /work/spider/文件名 长测(测试所有爬取所抓取的信息)vi 文件名.py 进入文本编辑器sz 文件名.py 导出文件rz为导入命令 rz ...
分类:
系统相关 时间:
2018-02-02 11:39:10
阅读次数:
180
八周三次课10.32/10.33
rsync通过服务同步10.34
linux系统日志10.35
screen工具10.32/10.33 rsync通过服务同步编辑: rsync.conf 配置文件:/etc/rsync.conf启动rsync服务10.34 linux系统日志10.35 screen工具
分类:
系统相关 时间:
2018-02-02 11:35:33
阅读次数:
208
HFILE=`who -m | awk '{print $1}'`readonly HISTFILE=/var/history/$HFILE-$USER-$UID.logreadonly HISTFILESIZE=50000readonly HISTSIZE=10000readonly HISTTI ...
分类:
系统相关 时间:
2018-02-02 11:33:25
阅读次数:
220
昨晚下班前将本本挂起了,没成想今早来发现电脑关机了。开机后外接的USB鼠标也失灵了。 搜索一番,感谢 QIYUEXIN大大的博客,顺利解决问题。 原贴在此:https://www.cnblogs.com/qiyuexin/p/6961531.html 把 改成: 完成后重启电脑即可。 ...
分类:
系统相关 时间:
2018-02-02 11:30:01
阅读次数:
252