文件夹的创建是一个相对简单的过程,主要是通过FileSystem中的mkdirs()方法,这个方法在DFSClient实例中调用同名方法mkdirs(),通过Hadoop本身的RPC机制调用Namenode的mkdirs()方法,最终这个调用PUSH到FSNameSystem的mkdirsInternal方法,这个方法主要就是检验访问权限..
分类:
其他好文 时间:
2015-05-26 19:09:18
阅读次数:
185
现在这个时代,很多是mysql数据库,废话不多说。忘记密码怎么办首先找到启动文件,添加选项--skip-grant-tables--skip-networkingvim/etc/init.d/mysqld
......
......
$exec--datadir="$datadir"--socket="$socketfile"--pid-file="$mypidfile"--skip-grant-tables--skip-net..
分类:
数据库 时间:
2015-05-26 19:07:18
阅读次数:
201
微信号VMCloud篇前语:看到封面,相信参加过在北京举行的2014年亚太区域MVPOpenDay的朋友一定不陌生,当时这篇名字为“Hyper-V的数学作业“的课程震撼了在场的每个人的心,包括笔者跟当时跟我一起前往的领导也深深被贾浩老师这篇既有实例又有数据的公开课所启发并在之后的项目..
分类:
其他好文 时间:
2015-05-26 19:06:12
阅读次数:
260
LAMP指的Linux(操作系统)、ApacheHTTP服务器,MySQL(有时也指MariaDB,数据库软件)和PHP(有时也是指Perl或Python)的第一个字母,一般用来建立web应用平台。LNMP中的N指的是Nginx配置防火墙,开启80端口(web)、3306端口(mysql)vi/etc/sysconfig/iptables-AINPUT-mstate--..
分类:
其他好文 时间:
2015-05-26 19:07:40
阅读次数:
181
数据模型(DataModel)storm使用tuple来作为它的数据模型。每个tuple是一堆值,每个值有一个名字,并且每个值可以是任何类型,在我的理解里面一个tuple可以看作一个没有方法的java对象。总体来看,storm支持所有的基本类型,字符串以及字节数组作为tuple的值类型。你也可以使用你..
分类:
其他好文 时间:
2015-05-26 19:05:57
阅读次数:
103
除了从父类集成代码外,Scala中的类还允许从一个或者多个traits中导入代码。对于Java程序员来说理解traits的最好方法就是把他们当作可以包含代码的接口(interface)。在Scala中,当一个类继承一个trait时,它就实现了这个trait的接口,同时还从这个trait中继承了所有的代码。..
分类:
其他好文 时间:
2015-05-26 19:05:18
阅读次数:
146
将一个或多个值value插入到列表key的表头如果有多个value值,那么各个value值按从左到右的顺序依次插入到表头:比如对一个空列表mylist执行LPUSHmylistabc,则结果列表为cba,等同于执行执行命令LPUSHmylista、LPUSHmylistb、LPUSHmylistc。如果key不存在,一个空列表会被创建..
分类:
其他好文 时间:
2015-05-26 19:06:51
阅读次数:
128
学习理解makefile模拟个应用的例子:有个工程包括头文件001.h、002.h、003.h、004.h、005.h、006.h、007.h共7个;程序文件001.c、002.c、003.c、004.c、005.c、006.c、007.c、008.c、009.c、010.c共10个文件。看着头大吧,先不关心具体内容。现在来编译该工程。如下:#cdexampl..
分类:
其他好文 时间:
2015-05-26 19:05:03
阅读次数:
129
zookeeper概述针对分布式应用的分布式协作服务,zookeeper的开发动机就是为了减轻分布式应用从头开发协作服务的负担。设计目标简单。允许多个分布的进程基于一个共享的,类似标准文件系统的树状名称空间进行协作。每个节点称作一个znode。ZooKeeperisreplicated几个zookeeper集..
分类:
其他好文 时间:
2015-05-26 19:07:22
阅读次数:
143
HBase0.92版本之后,RegionServer的Compact过程根据待合并的文件大小分为smallcompaction和largecompaction两种,由此可能导致在集群写入量大的时候Compact占用过多的网络出口带宽。本文将详细描述集群使用过程中遇到这一问题的排查过程及其解决方法。1.发现问题HBase集群(版..
分类:
其他好文 时间:
2015-05-26 19:07:39
阅读次数:
126
MooseFS是一种分布式文件系统,MooseFS文件系统结构包括以下四种角色:1、管理服务器managingserver(master)2、元数据日志服务器(备份服务器)Metaloggerserver(Metalogger)3、数据存储服务器dataservers(chunkservers)4、客户机挂载使用clientcomputers1、管理服务器:负责..
分类:
其他好文 时间:
2015-05-26 19:07:22
阅读次数:
275
并行处理:可以在很多语句中指定reducer的数量group,join,cogroup,cross,distinct,order(复习:reduce的任务个数设置为稍小于集群中的reduce任务槽数)参数替换:在pig语句中使用$加变量名的方式使用外部定义的变量值,在运行时可以通过"-paraminput=”设置变量的值,或者通过"-..
分类:
其他好文 时间:
2015-05-26 19:07:21
阅读次数:
142
数据永远都是重要的,怎么样的数据备份方案才是优秀的呢?对于中小企业来说,要制定一个适合企业自身实际需求的数据备份和恢复计划是十分有必要的。下面一起来看看需要怎么做吧!1、了解企业网络中有哪些数据,以及它们对企业业务的重要程度在开始进行数据备份之前,我们需要要知..
分类:
其他好文 时间:
2015-05-26 19:06:32
阅读次数:
172
如题,分析首先最简单的取出ipcd/usr/local/nginx/logs
awk‘{print$1}‘access.log|sort|uniq-c|sort-rn|head-n50|awk‘{print$2}‘>/root/list
#在nginx/apache下执行上述代码。把ip写到list列表然后思路就是把每个ip的来源地分析出来,我用的淘宝的ip数据库,还是不错的#!/bi..
分类:
数据库 时间:
2015-05-26 19:05:22
阅读次数:
334
进程管理的相关命令#ps(processstatue)选项有些是-有些乜有,a:显示所有与终端有关的进程u:显示详细信息x:显示所有与终端无关的进程state字段解释进程状态:D:不可中断的睡眠R:就续或运行S:可中断的睡眠T:停止Z:(zomble)僵死态<:高优先级进程N:低优先级进程+:前..
分类:
系统相关 时间:
2015-05-26 19:05:00
阅读次数:
197
一时Eclipse不会高亮相同变量显示了,很不方便,恢复高亮相同变量方法如下:windows->preferences->java->Editor->MarkOccurences最上边的大标题的复选框勾上,下面的就都可以高亮显示了,Localvariables是变量的高亮显示
分类:
系统相关 时间:
2015-05-26 19:05:11
阅读次数:
253
今天搞了一天,对自己的一个小项目进行zendguard加密。完了之后装上zendoptimizer解析器,可以访问路由的时候,一直报‘Incompatiblefileformat:TheencodedfilehasformatmajorID65540,whereastheOptimizerexpects2inD:\haofeng\Apache2.2\www\index.phponline0’这样错误。将ze..
分类:
Web程序 时间:
2015-05-26 19:04:28
阅读次数:
173