源码搭建LAMP环境一，LAMP环境概述：LAMP指的Linux（操作系统）、ApacheHTTP服务器，MySQL（有时也指MariaDB，数据库软件）和PHP（有时也是指Perl或Python）的第一个字母，一般用来建立web服务器。是一组常用来搭建动态网站或者服务器的开源软件，本身都是各自独立的程序，但是..
分类：
其他好文 时间：
2015-08-26 00:05:39
阅读次数：
282
Spark注重建立良好的生态系统，它不仅支持多种外部文件存储系统，提供了多种多样的集群运行模式。部署在单台机器上时，既可以用本地（Local）模式运行，也可以使用伪分布式模式来运行；当以分布式集群部署的时候，可以根据自己集群的实际情况选择Standalone模式（Spark自带的模式）、YARN-Client模式或者YARN-Cluster模式。...
分类：
其他好文 时间：
2015-08-19 09:29:03
阅读次数：
241
做测试没有多台机器又不想做虚拟机,通过单独配置zoo.conf实现单机器部署zookeeper集群.1.集群配置文件编写zookeeper服务1:clientPort=2181
dataDir=/var/data/zookeeper/1.machine
tickTime=2000
initLimit=5
syncLimit=2
server.1=127.0.0.1:20881:30881
server.2=127.0.0.1:2..
分类：
其他好文 时间：
2015-08-12 19:43:21
阅读次数：
138
伪集群, 是指在单台机器中启动多个zookeeper进程, 并组成一个集群. 以启动3个zookeeper进程为例
1、找到zk目录，复制两份
cp -r zk zk2
cp -r zk zk3
2、分别修改配置文件zoo.cfg
dataDir=/opt/zk/zk/data
dataLogDir=/opt/zk/zk/logs
server.0=127.0.0.1:5555:66...
分类：
其他好文 时间：
2015-08-11 18:55:33
阅读次数：
164
为什么要做web cache，我想大家最主要的是解决流量的压力。随着网站流量的提升，如果只是单台机器既处理静态文件，又处理动态脚本，显然效率很难上升，不能处理日益上涨的流量压力。与此同时某些网站的页面内容并不是经常变化，因此我们可以分两层架构来组织网站。前端web缓存+后端web服务器，可以参看这里...
分类：
Web程序 时间：
2015-07-10 13:16:23
阅读次数：
175
第1章 引言
随着互联网应用的广泛普及，海量数据的存储和访问成为了系统设计的瓶颈问题。对于一个大型的互联网应用，每天几十亿的PV无疑对数据库造成了相当高的负载。对于系统的稳定性和扩展性造成了极大的问题。通过数据切分来提高网站性能，横向扩展数据层已经成为架构研发人员首选的方式。水平切分数据库，可以降低单台机器的负载，同时最大限度的降低了了宕机造成的损失。通过负载均衡策略，有效的降低了单台机器的访...
分类：
数据库 时间：
2015-07-06 16:05:08
阅读次数：
255
redis 程序运行过程并不会消耗太多的 CPU 和 IO 资源（主要消耗memory），如是在单台机器上如果只启用一个redis实例会造成资源浪费 。同时为了增加可用性，一般也不会在单机上只运行一个redis实例，本篇就介绍下，...
分类：
其他好文 时间：
2015-05-14 18:58:26
阅读次数：
384
Puppet是什么？Puppet是一款为IT系统管理员和顾问们设计的自动化软件，你可以用它自动化地完成诸如安装应用程序和服务、补丁管理和部署等工作。所有资源的相关配置都以“manifests”的方式保存，单台机器或者多台机器都可以使用。如果你想了解更多内容，Puppet实验室的网站上有..
分类：
其他好文 时间：
2015-05-12 19:16:00
阅读次数：
249
http://khangaonkar.blogspot.com/2012/09/hadoop-2x-tutorial.html1. hdfs-site.xmlnamenode and datanode folder need to create in advance, all the content...
分类：
其他好文 时间：
2015-04-29 07:04:02
阅读次数：
150
在刚刚过去的spark submit上，Matei Zahara简单回顾了下2014年spark的发展，可用一个词来概括那就是"Amazing"!!!那么2015年，spark 将主要精力放在哪些方面呢？一个是数据科学，即提供更高级的API接口，使得用户更易上手，像在单台机器上使用。主要的改变是：1...
分类：
其他好文 时间：
2015-03-29 20:55:12
阅读次数：
150
