柯南君上一章《柯南君:看大数据时代下的IT架构(1)业界消息队列对比 》中,粗略的讲了一下,目前消息队列的几种常见产品的优劣对比,接下来的几章节会分别详细阐述,本章介绍RabbitMQ,好吧,废话少说,正式开始:
一、基础概念详细介绍
1、引言
你是否遇到过两个(多个)系统间需要通过定时任务来同步某些数据?你是否在为异构系统的不同进程间相互调用、通讯的问题而苦恼、挣扎?如果是,那么恭喜你,消...
分类:
其他好文 时间:
2014-12-14 13:20:53
阅读次数:
214
发布Apache Hadoop 2.6.0——异构存储,长时间运行的服务与滚动升级支持
我很高兴地宣布,在Apache的Hadoop社区已经发布的Apache Hadoop的2.6.0:http://markmail.org/message/gv75qf3orlimn6kt!
特别是,我们很高兴在此版本中相关的三个主要片:异构存储在HDFS使用SSD和内存层,支持长时间运行在YARN服务和滚动升级,将升级您的集群软件,然后重新启动升级的节点而无需关闭群集或丢失正在进行的工作。YARN作为其架构中心,Hado...
分类:
Web程序 时间:
2014-12-08 12:28:20
阅读次数:
224
AMD今天宣布他们与微软合作的c++ AMP1.2版本,这是一个开源的c++编译器和开放规范的c++ AMP,而它首次可以在Linux和Windows上面运行了。看来AMD的目标是为了支持更多跨平台解决方案,继续贡献给开源社区提供多种编程语言,利用自己在异构平台的研发优势,为开发人员提供全新的异构平...
分类:
编程语言 时间:
2014-12-08 10:33:25
阅读次数:
210
原文出处:http://www.blogjava.net/icewee/archive/2012/07/06/382399.html多系统(异构系统)进行交互时,一种良好的方式便是调用Web Service,本示例基于Apache组织的CXF,为了方便起见特将服务端和客户端写在同一个工程下,实际项目...
分类:
编程语言 时间:
2014-12-05 19:14:33
阅读次数:
257
ETL负责将分散的、异构数据源中的数据如关系数据、平面数据文件等抽取到临时中间层后进行清洗、转换、集成,最后加载到数据仓库或数据集市中,成为联机分析处理、数据挖掘的基础。ETL一词较常出现在数据仓库,但其对象并不局限于数据仓库。ETL是数据仓库中的非常重要的一环。它是承前启后的必要的一步。相对于关系...
分类:
其他好文 时间:
2014-12-05 14:09:04
阅读次数:
197
1.mule ESB整合系统四种模式
A.简单服务模式
属于几个web Service之间的同步调用,请求响应处理模式。
B.桥接模式
C.校验器模式
校验器模式通过定义一个校验过滤器过滤服务请求,并同步返回ACK(ACKnowledge)或NACK(Not Acknowledge)结果。通过校验的服务请求被异步分发给处理方。
...
分类:
Web程序 时间:
2014-12-02 13:36:11
阅读次数:
269
课程大纲:第1周Hadoop生态系统概述以及版本演化概要介绍Hadoop生态系统及其版本演化历史,并给出hadoop版本选择建议。第2周HDFS2.0原理、特性与基本架构介绍HDFS2.0原理与架构,并与HDFS1.0进行对比。介绍HDFS2.0新特性,包括快照、缓存、异构存储架构等第3周YARN应用场景、基..
分类:
其他好文 时间:
2014-11-30 00:59:15
阅读次数:
544
现在是老环境的虚拟机需要往新环境迁移:
面临的问题:
1、新老环境存储不同
2、部分代码不同
3、网络环境不同
4、win2003的虚拟机老环境没有装virtio驱动,新环境用的virtio
解决方案:
现在迁移的总体方案
1、在新环境各个用户的账号下创建相同规格(或者不同规格)虚拟机,这样可以保证数据库数据是没有问题的,也不会多出垃圾数据;创建相同的卷;需要记录虚拟机uu...
分类:
其他好文 时间:
2014-11-27 12:46:49
阅读次数:
196
目前还有很多商用程序继续在使用C++、Java、VisualBasic和其他各种各样的语言编写。现在,除了最简单的程序之外,所有的应用程序都需要与运行在其他异构平台上的应用程序集成并进行数据交换。这样的任务通常都是由特殊的方法,如文件传输和分析,消息队列,还有仅适用于某些情况的的API,如I...
分类:
Web程序 时间:
2014-11-25 18:22:04
阅读次数:
226
Redis与MySQL的结合目前大部分互联网公司使用MySQL作为数据的主要持久化存储,那么如何让Redis与MySQL很好的结合在一起呢?我们主要使用了一种基于MySQL作为主库,Redis作为高速数据查询从库的异构读写分离的方案。为此我们专门开发了自己的MySQL复制工具,可以方便的实时同步My...
分类:
数据库 时间:
2014-11-22 14:36:56
阅读次数:
163