http://kafka.apache.org/08/configuration.html Broker Configs 4个必填参数， broker.id Each broker is uniquely identified by a non-negative integer id broker唯...
分类：
其他好文 时间：
2014-09-04 18:33:49
阅读次数：
174
问题来源：创建一个游戏系统，其将运行在互联网的环境中。客户端通过WWW服务或特定的客户端软件连接到游戏服务器，随着流量的增加，系统不断的膨胀，最终后台数据、业务逻辑被分布式的部署。然而相比中心化的系统，复杂度被无可避免的增大了，该如何降低各个组件之间的耦合度。挑战：需要保证可伸缩性、可维护性、可更新...
分类：
其他好文 时间：
2014-09-01 13:49:33
阅读次数：
201
安装Kafka集群
假设我们有集群中，需要配置4个broker，形成下面图表的Kafka集群。
2.1 配置文件
配置所有的Kafka的Producer文件，其中，brokerpid的值是独一无二的数字值。几个核心属性如下：
# The id of the broker.This must be set to a unique integer for each broke...
分类：
其他好文 时间：
2014-08-29 11:05:47
阅读次数：
293
编程
Producer是一个应用程序，它创建消息并发送它们到Kafka broker中。这些producer在本质上是不同。比如，前端应用程序，后端服务，代理服务，适配器对于潜在的系统，Hadoop对于的Producer。这些不同的Producer能够使用不同的语言实现，比如java、C和Python。下面的这部图表解释了消息producer的Kafka API.
下面将详...
分类：
其他好文 时间：
2014-08-29 11:03:57
阅读次数：
277
Broker 模式采用 broker 模式对分布式计算进行简单模拟。系统在一个进程内模拟分布式环境，因此不涉及网络编程和进程间通信，Broker 通过本地函数调用的方式实现 request 和 response的转发。采用 broker 模式对分布式计算进行简单的模拟，要求如下：设计四个 serve...
分类：
其他好文 时间：
2014-08-26 00:19:35
阅读次数：
529
简单的说就是实现了ActiveMQ的broker上各种操作的记录跟踪和通知。使用这个功能，你可以实时的知道broker上创建或销毁了连接，添加或删除了生存者或消费者，添加或删除了主题或队列，有消息发送和接收，什么时候有慢消费者，什么时候有快生产者什么时候什么消息被丢弃什么时候broker被添加到集群...
分类：
其他好文 时间：
2014-08-22 14:18:38
阅读次数：
767
1.??? 配置 ?? Broker主要配置 ? 参数 默认值 说明(解释) broker.id =0 每一个broker在集群中的唯一表示，要求是正数。当该服务器的IP地址发生改变时，broker.id没有变化，则不会影响consumers的消息情况 ...
分类：
其他好文 时间：
2014-08-21 11:45:34
阅读次数：
389
Rabbitmq
初识rabbitmq
RabbitMQ是流行的开源消息队列系统，用erlang语言开发。RabbitMQ是AMQP（高级消息队列协议）的标准实现。如果不熟悉AMQP，直接看RabbitMQ的文档会比较困难。不过它也只有几个关键概念，这里简单介绍
几个概念说明：
Broker：简单来说就是消息队列服务器实体。
Exchange：消息交换机，它指定消息按什么规则，路由到...
分类：
其他好文 时间：
2014-08-19 20:57:25
阅读次数：
630
add by zhj: 如果用Python，那可以用celery，它是一个分布式任务队列，它的broker可以选择Rabbitmq/Redis/Mongodb等，celery通过Kombu这个library来调用Rabbitmq的接口。我们可以认为Kombu是把Rabbitmq进行了封装，使其更符合...
分类：
其他好文 时间：
2014-08-18 23:26:33
阅读次数：
496
在druid集群环境中 broker节点的作用是查询。它知道metadata 通过zookeeper发送到了集群中的哪个节点，从而能够准确的查询到。broker也把各个节点的结果汇聚到一个节点中。On start up, Realtime nodes announce themselves and ...
分类：
其他好文 时间：
2014-08-17 01:00:31
阅读次数：
257
