一、Kafka架构 Producer ：消息生产者，就是向 kafka broker 发消息的客户端； Consumer ：消息消费者，向 kafka broker 取消息的客户端； Consumer Group （CG）：消费者组，由多个 consumer 组成。消费者组内每个消费者负责消费不同分 ...
分类：
其他好文 时间：
2020-05-01 18:58:23
阅读次数：
71
（1）Producer的API 1、发送流程：Kafka 的 Producer 发送消息采用的是异步发送的方式。在消息发送的过程中，涉及到了两个线程——main 线程和 Sender 线程，以及一个线程共享变量——RecordAccumulator。main 线程将消息发送给 RecordAccum ...
from multiprocessing import Process, JoinableQueueimport timeimport randomdef producer(name, food, q): for i in range(5): data = '%s生产了%s%s' % (name, ...
分类：
其他好文 时间：
2020-04-23 18:59:40
阅读次数：
38
大纲 (一)、异步投递与确认签收回调 (二)、延迟投递与确认投递 (三)、消费重试机制 (四)、死信队列 (一)、异步投递与确认签收回调 1.What?Why? ActiveMQ 支持同步、异步两种发送的模式将消息发送到 broker，模式的选择对发送延时有巨大的影响。producer 能达到怎样的 ...
分类：
其他好文 时间：
2020-04-22 20:15:33
阅读次数：
92
一、概述1.1、简介Kafka最初是由LinkedIn公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统。ApacheKafka也是一个开源消息系统，由Scala写成；Kafka是一个分布式消息队列。Kafka对消息保存是根据Topic进行归类，发送消息者称为Producer，消息接受者称为Consumer，此外kafka集群有多个kafka实例组成，每
分类：
其他好文 时间：
2020-04-17 09:28:47
阅读次数：
71
一.整合kafka(生产者)步骤1.导入依赖(pom.xml)2.编写配置文件,修改配置文件的ip和端口号,修改主题(producer.xml)3.如果再ssm项目中可以让spring.xml来加载这个配置文件 <import resource="classpath:XXX.xml" /> 如果是再 ...
分类：
编程语言 时间：
2020-04-06 10:04:41
阅读次数：
84
通过命令行工具(kafka-console-producer.sh和kafka-console-consumer.sh)是能够相互通信的，producer发布的信息consumer能够接收到。 但是java通过kafka-client的API写的代码始终不能跟kafka通信：java produce ...
分类：
编程语言 时间：
2020-04-02 10:24:08
阅读次数：
530
一、Rabbitmq概念RabbitMQ是一个开源的靠AMQP协议实现的服务，服务器端用Erlang语言编写，支持多种客户端，如：Python、Ruby、.NET、Java、JMS、C、PHP、ActionScript、XMPP、STOMP等，支持AJAX。用于在分布式系统中存储转发消息，在易用性、扩展性、高可用性等方面表现不俗。AMQP，即AdvancedMessageQueuingProtoc
分类：
其他好文 时间：
2020-04-01 15:09:35
阅读次数：
88
前言 在阿里巴巴技术发展初期，伴随着淘宝业务的快速发展，网站流量呈现几何级增长。单体巨无霸式的应用无法处理爆发式增长的流量，阿里内部从业务、组织层面进行了一次大的水平与垂直切分，拆分出用户中心、商品中心、交易中心、评价中心等平台型应用，分布式电商系统的雏形由此诞生。阿里的消息引擎就是在这样的大背景下 ...
分类：
其他好文 时间：
2020-03-26 21:53:20
阅读次数：
121
下载地址 https://mirrors.tuna.tsinghua.edu.cn/apache/kafka/ kafka同样依赖Java环境，由于和zookeeper在相同的机器上，之前已经安装过了，所有可以直接跳过Java环境安装 参考文档 https://www.cnblogs.com/pan... ...
分类：
其他好文 时间：
2020-03-20 17:02:29
阅读次数：
107
