在AWS里用Elastic Map Reduce 开一个Cluster然后登陆master node并编译以下程序:import java.io.IOException;
import java.util.StringTokenizer;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.Path;
...
分类:
其他好文 时间:
2014-07-22 23:01:32
阅读次数:
405
Hadoop集群配置完成,web监控界面的50070和50030端口不需用户验证即可访问,对生产环境是不容许的,需要加上安全机制。实验环境:OS:Centos
6.5 x64, Soft:Hadoop 1.2.11、修改core-site.xml,增加如下内容,配置完成后拷贝到其他节点上。 hado...
分类:
Web程序 时间:
2014-05-02 12:17:15
阅读次数:
1290
需要使用redis来做任务队列,所以花点时间研究下怎么使用...
Redis的内存存储结构是个大的字典存储,也就是我们通常说的哈希表。Redis小到可以存储几万记录的CACHE,大到可以存储几千万甚至上亿的记录(看内存而定),这充分说明Redis作为缓冲的强大。Redis的核心数据结构就是字典(dict),dict在数据量不断增大的过程中,会遇到HASH(key)碰撞的问题,如果DICT不够大,碰撞的概率增大,这样单个hash 桶存储的元素会越来愈多,查询效率就...
分类:
其他好文 时间:
2014-05-01 21:56:59
阅读次数:
398
3.AlwaysOn可用组Alwayson支持的,是一个可用性组,每个可用性组是包含了多个用户数据库的容器,可用性组内的数据库可以作为一个整体进行故障转移。AlwaysOn关键特性:一、类似集群的特性1.多个数据库可以一起迁移2.提供一个虚拟服务器名,这个虚拟服务器名始终是当前的primary。3....
分类:
数据库 时间:
2014-05-01 12:45:40
阅读次数:
1374
原文地址:http://blog.csdn.net/daniel_ustc/article/details/18099067#commentsredis介绍Redis是一个开源、支持网络、基于内存、键值对存储数据库,使用ANSI
C编写, redis中文官方网站,点这里。redis安装我的linux...
分类:
系统相关 时间:
2014-05-01 12:34:04
阅读次数:
602
Memcache是临时性键值存储NoSQL数据库,过去被大量使用在互联网网站中,作为应用和数据库之间的缓存层(现已打都被Redis取代),它是由Danga Interactive公司开发,最初为了加速LiveJournal 访问速度而开发,后来成为广泛应用的开源项目,官网: http://memcached.org/
Memcache的特点
全内存运转
哈希方式存储
简单文本协议进...
分类:
数据库 时间:
2014-04-29 13:47:20
阅读次数:
444
http://blog.chinaunix.net/uid-12380499-id-105320.html...
分类:
其他好文 时间:
2014-04-29 13:26:21
阅读次数:
194
我们都知道在Web开发中,都需要服务器,比如Java Web开发的Tomcat,WebLogic,WebSphere,现在来看利
用Tornado Web Server框架如何写一个简易的Python服务器。
一般来说只需要实现get和post方法就可以了。以上次使用redis数据库的例子说明,数据库插入代码如下:
import redis
import datetime
clas...
分类:
其他好文 时间:
2014-04-29 13:17:20
阅读次数:
397
上次的博文项目进阶
之 集群环境搭建(二)MySQL集群中,我们搭建了一个基础的MySQL集群,这篇博客咱们继续讲解MySQL集群的相关内容,同时针对上一篇遗留的问题提出一个解决方案。...
分类:
数据库 时间:
2014-04-28 10:26:42
阅读次数:
403