一、环境搭建 § 192.168.196.58/...(windows8):Logstash : Shipper § 192.168.1.192(windows7):Redis : Broker § 192.168.196.154(windows7):Lostash : Indexer, ES : ...
分类:
其他好文 时间:
2016-12-12 01:34:58
阅读次数:
312
Kafka配置优化其实都是修改server.properties文件中参数值 1、网络和io操作线程配置优化 # broker处理消息的最大线程数 num.network.threads=xxx # broker处理磁盘IO的线程数 num.io.threads=xxx 建议配置: 一般num.ne ...
分类:
其他好文 时间:
2016-12-07 01:09:35
阅读次数:
674
官网:http://www.rabbitmq.com/ zeromq 相当于 message backbone,而rabbitmq相当于message broker。有的应用系统中,二者并存。 (1)windows安装 windows下载:rabbitmq-server-3.6.6.exe,需要先安 ...
分类:
编程语言 时间:
2016-12-05 02:28:00
阅读次数:
272
具体步骤如下: 1.把activemq目录下的conf文件复制一份,叫做conf2, 命令: cp -r conf conf2 2.修改conf2目录下的activemq.xml文件 a.修改brokerName,不能和conf目录下的activemq.xml中的brokerName一样 就可以了 ...
分类:
其他好文 时间:
2016-12-04 07:25:59
阅读次数:
221
ActiveMQ支持的client-broker通讯协议有:TCP、NIO、UDP、SSL、Http(s)、VM。 其中配置Transport Connector的文件在activeMQ安装目录的conf/activemq.xml中的 <transportConnectors>标签之内。 下面就具体 ...
分类:
其他好文 时间:
2016-12-01 02:57:23
阅读次数:
169
普通的信息发送和消费 首先要启动nameserver和broker,nameserver是一个几乎无状态节点。broker分为master和slave,master和slave的对应关系通过指定相同的BrokerName,不同的BorkerId来定义,BrokerId为0表示Master,其他为Sl ...
分类:
其他好文 时间:
2016-11-29 19:20:18
阅读次数:
286
redis作为logstash中的官方broker,既有input插件,还有output插件。 redis input插件 data_type属性: 有三种类型, list -》 BLPOP --阻塞式列表弹出 channel -》 SUBSCRIBE -- 指定订阅者 pattern_channe ...
分类:
其他好文 时间:
2016-11-26 20:55:03
阅读次数:
206
文章摘自:美团点评技术团队 Kafka文件存储机制那些事 Kafka是什么 Kafka是最初由Linkedin公司开发,是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的分布式日志系统(也可以当做MQ系统),常见可以用于web/nginx日志、访问日志,消息服务等等,Linked ...
分类:
其他好文 时间:
2016-11-24 07:04:54
阅读次数:
205
解决方法: 打开SQL Server,新建查询: ALTER DATABASE 数据库名 SET NEW_BROKER WITH ROLLBACK IMMEDIATE;ALTER DATABASE 数据库名 SET ENABLE_BROKER; 转自:http://www.cnblogs.com/I ...
分类:
数据库 时间:
2016-11-13 22:03:46
阅读次数:
340
broker 1. broker的启动 brker的启动 Broker向namesrv注册 Topic在broker文件上的存储json格式 Namesrv接收Broker注册的topic信息, namesrv只存内存,但是broker有任务定时推送 1. 接收数据向RouteInfoManager ...
分类:
其他好文 时间:
2016-11-11 19:55:15
阅读次数:
333