经过一段时间的配置,Hadoop环境总算运行起来了,但是呢,为何主节点就没有跑tasktracker和datanode进程,slave节点也没有跑secondary进程,Hadoop是如何控制的呢?经过看权威指南(267页)和跟群里同学讨论,还有自己测试,最终确定:tasktracker和datan...
分类:
其他好文 时间:
2014-07-19 20:19:01
阅读次数:
239
Linux服务器在启动时需要启动很多系统服务,它们向本地和网络用户提供了Linux的系统功能接口,直接面向应用程序和用户。提供这些服务的程序是由运行在后台的守护进程(daemons)来执行的。守护进程是生存期长的一种进程。它们独立于控制终端并且周期性的执行某种任务或等待处理某些发生的事件。他们常.....
分类:
系统相关 时间:
2014-07-19 00:30:25
阅读次数:
404
1.启动hadoop守护进程 bin/hadoop start-all.sh2.在hadoop的bin目录下建立一个input文件夹 mkdire input3.进入input目录之后,在input目录下新建两个文本文件,并想其写入内容echo "hello excuse me fuck thank...
分类:
其他好文 时间:
2014-07-18 23:39:00
阅读次数:
350
一个网站,除了有数据库,还有很多别的文件,比如用户上传的图片,你的网站代码之类,光有数据库而没有这些文件你的网站也没法跑起来。
和数据库比起来,网站文件要大得多,而且文件数目也多得多,要做到实时同步必须考虑“增量文件同步”,一般传统的方法是使用 inotify + rsync 写脚本来操作。...
分类:
Web程序 时间:
2014-07-18 23:02:58
阅读次数:
262
(1) 一个人绝不是一张白纸,而是带着他个人的往事、他的心理背景去和别人打交道的。忘记
这一点将是一个愚蠢的错误。
我们和别人打交道,都会首先碰到一个问题:性格。性格在心理结构中占据了一席之地,有着不可忽略的心理功能。古希腊哲学家赫拉克利特早就说了,性格是人的守护神。用我的话来说,性格就是你和外部世界打交道,让你在这个世界中凸显出来的一种固定方式,同时它用来防御外部世界对你“自我”的冲击。...
分类:
其他好文 时间:
2014-07-18 22:19:49
阅读次数:
325
1.zend server 安装好后需要重启下.无论是win还是mac..win不重启组件不能用.mac 不重启守护进程是离线的2.修改apache配置.的根目录.到zendstudio的工作空间Listen 80DocumentRoot "K:\zendworkspace" Options ...
分类:
其他好文 时间:
2014-07-18 17:31:51
阅读次数:
210
是不是经常要分析用户的行为?是不是经常遇到多台server上传的日志一起分析?是不是对数据统计的间隔时间要求非常短?还有木有由于日志文件过大,而须要分块处理?1、说明一点在日志写入的时候必须依照一种严格的格式,这样在做解析的时候,才好分割。比方 gameid:123 gameid:2333。分割统一...
分类:
数据库 时间:
2014-07-18 09:33:58
阅读次数:
337
daemon进程守护进程1.fork子进程,而后父进程退出,此时子进程会被init进程接管2.修改子进程的工作目录,创建新进程组和新会话,修改umask3.子进程再次fork一个进程,这个进程可以称为孙子进程,而后子进程退出4.重定向孙子进程标准输入流,标准输出等atexit程序退出调用某个函..
分类:
编程语言 时间:
2014-07-17 09:15:42
阅读次数:
272
yum源安装MongoDBMongoDBv2.6.0版的软件仓库一共有五个包:1)mongodb-org此包是元数据包,它可以实现自动安装下面的4个组件包。2)mongodb-org-server此包里面有mongod守护程序,以及相关的配置和初始化脚本。3)mongodb-org-mongos此包里面有mongos守护程序。4)mongodb-org-..
分类:
数据库 时间:
2014-07-17 08:23:21
阅读次数:
307
在前面的博文实践记录之-Rsync镜像备份介绍了镜像备份工具Rsync的安装和使用.但在大数据时代,rsync的不足之处也暴露出来.首先.rsync本身实现不了实时备份.靠系统的crontab实现的话也受限于1分钟.因此这就导致了服务端和客户端数据可能出现不一致,更无法在应用故障时做到..
分类:
其他好文 时间:
2014-07-16 16:44:36
阅读次数:
391