码迷,mamicode.com
首页 >  
搜索关键字:hadoop 集群    ( 32537个结果
项目实践中Linux集群的总结和思考
前言:作为一名Linux/unix系统工程师、项目实施工程师,这几年一直在涉及到对外项目,经手过许多小中型网站的架构,F5、LVS及Nginx接触的都比较多,我想一种比较通俗易懂的语气跟大家说明下何谓负载均衡,何谓Linux集群,帮助大家走出这个误区,真正意义上来理解它们,具体项目施工案例请参考我在...
分类:系统相关   时间:2014-05-08 18:00:02    阅读次数:448
Mysql高级集群-读写分离Amoeba
一、环境介绍Master-IP:10.0.0.201Slave-IP:10.0.0.202Amobea-IP:10.0.0.203二、安装JDK#mkdir/Amoeba#tar-xvfjdk-7u40-linux-x64.tar.gz-C/Amoeba/#vim/etc/profileJAVA_HOME=/Amoeba/jdk1.7.0_40exportJAVA_HOMEPATH=$JAVA_HOME/bin:$PATHexportPATHCLASSPATH=.:$JAVA_HOME/l..
分类:数据库   时间:2014-05-08 16:27:36    阅读次数:470
基于HBase的手机数据备份系统
基于HBase实现的手机数据备份系统,实现了手机关键信息的备份,如短信、联系人等。 包括服务器端(Server)和客户端(Client) Server运行环境:Hadoop+HBase+Tomcat Client运行环境: Eclipse+Android2.3 ----------------------------------------------------- ...
分类:移动开发   时间:2014-05-08 16:07:49    阅读次数:390
Hadoop-4、Mapred数据去重
import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.Text;import org.ap...
分类:其他好文   时间:2014-05-08 11:27:24    阅读次数:309
Hadoop-5、排序(Combiner泛谈)
一、Combiner作用1、combiner最基本是实现本地key的聚合,对map输出的key排序,value进行迭代。如下所示:map: (K1, V1) → list(K2, V2)combine: (K2, list(V2)) → list(K2, V2)reduce: (K2, list(V...
分类:其他好文   时间:2014-05-08 09:37:49    阅读次数:472
Linux High Availabi RHCS
-----本文大纲简介术语环境配置实现过程命令行管理工具-------------一、简介RHCS即 RedHat Cluster Suite ,中文意思即红帽集群套件。红帽集群套件(RedHat Cluter Suite, RHCS)是一套综合的软件组件,可以通过在部署时采用不同的配置,以满足你的...
分类:系统相关   时间:2014-05-08 08:03:51    阅读次数:667
性能调优
大数据量引起的高并发处理: 1、数据量超过百万时增加集群服务器,比如使查询和操作分别在不同服务器上执行,如果数据量超过千万时这样会增加服务器间相互复制数据的资源开销,这时考虑把数据资源比如用户表根据ID放在不同的数据库集群中。 2、是页面静态化,因为html比jsp更节省资源和性能,考虑将页面做成html返回给客户,比如用freemarker工具 3、缓存技术,集群中采用memcached...
分类:其他好文   时间:2014-05-08 04:18:07    阅读次数:361
集群(cluster)和高可用性(HA)的概念
1.1什么是集群简单的说,集群(cluster)就是一组计算机,它们作为一个整体向用户提供一组网络资源。这些单个的计算机系统就是集群的节点(node)。一个理想的集群是,用户从来不会意识到集群系统底层的节点,在他/她们看来,集群是一个系统,而非多个计算机系统。并且集群系统..
分类:其他好文   时间:2014-05-08 02:42:43    阅读次数:356
RedHat EL5 安装Oracle 10g RAC之--CRS 安装
RedHatEL5安装Oracle10gRAC之--CRS安装系统环境:操作系统:RedHatEL5Cluster:OracleCRS10.2.0.1.0Oracle:Oracle10.2.0.1.0如图所示:RAC系统架构二、CRS安装ClusterReadyService是Oracle构建RAC,负责集群资源管理的软件,在搭建RAC中必须首先安装.安装需采用图形化方式,以O..
分类:数据库   时间:2014-05-08 02:18:09    阅读次数:647
linux杂谈(十九):DNS服务器的配置(二)
DNS服务器的集群配置,以及信息的同步!...
分类:系统相关   时间:2014-05-07 23:00:03    阅读次数:461
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!