摘要
Kafka是由LinkedIn开发并开源的分布式消息系统,因其分布式及高吞吐率而被广泛使用,现已与Cloudera Hadoop,Apache Storm,Apache Spark集成。本文介绍了Kafka的创建背景,设计目标,使用消息系统的优势以及目前流行的消息系统对比。并介绍了Kafka的架构,Producer消息路由,Consumer Group以及由其实现的不同消息分发方式...
分类:
其他好文 时间:
2016-05-12 13:33:19
阅读次数:
285
kafka是一个分布式的,高吞吐量的、信息分片存储,消息同步复制的开源消息服务,它提供了消息系统的功能,但是采用了独特的设计。kafka最初由LinkedIn设计开发,使用Scala语言编写,用作LinkedIn网站的活动流数据和运营数据处理工具,这其中活动流数据是指页面访问量、被查看内..
分类:
其他好文 时间:
2016-05-10 18:58:58
阅读次数:
120
kafka是一个分布式的,高吞吐量的、信息分片存储,消息同步复制的开源消息服务,它提供了消息系统的功能,但是采用了独特的设计。 kafka最初由LinkedIn设计开发,使用Scala语言编写,用作LinkedIn网站的活动流数据和运营数据处理工具,这其中活动流数据是指页面访问量、被查看内容方面的信 ...
分类:
其他好文 时间:
2016-05-10 18:09:26
阅读次数:
184
最近一段时间,使用Kafka比较多。从初期的FE项目中单纯调研Kafka
Producer怎么使用到后面的在弦上项目使用Kafka
Consumer期间,对Kafka有了一个大致的了解。最近由于比较空闲,所以在寻找一些关于Kafka的资料来看。总的来说,Kafka就是一个新型的分布式消息队列开源工具,现成的PDF、书籍是比较少的,最好的资料还是Apache
上的Kafka,Apache Ka...
分类:
其他好文 时间:
2016-05-07 09:14:02
阅读次数:
223
本文转发自Jason’s Blog,原文链接 http://www.jasongj.com/2015/03/10/KafkaColumn1 摘要 Kafka是由LinkedIn开发并开源的分布式消息系统,因其分布式及高吞吐率 而被广泛使用,现已与Cloudera Hadoop,Apache Stor ...
分类:
其他好文 时间:
2016-05-02 20:05:04
阅读次数:
348
apache kafka总结本文将从多个方面对apache kafka进行总结.简介apache kafka是一个分布式消息队列.
这个消息队列在很多场景中被应用, 这一点在kafka apache项目的网站中就有介绍.
相对于其他消息队列而言(比如rabbitMQ等), 在大量数据传输方面性能较好.
当然也有它的不足, 暂时没有足够的中文文档是一方面, 另一方面, kafka在用户制定方面也...
分类:
Web程序 时间:
2016-04-29 19:45:20
阅读次数:
224
apache kafka总结本文将从多个方面对apache kafka进行总结.简介apache kafka是一个分布式消息队列.
这个消息队列在很多场景中被应用, 这一点在kafka apache项目的网站中就有介绍.
相对于其他消息队列而言(比如rabbitMQ等), 在大量数据传输方面性能较好.
当然也有它的不足, 暂时没有足够的中文文档是一方面, 另一方面, kafka在用户制定方面也...
分类:
Web程序 时间:
2016-04-24 06:26:50
阅读次数:
264
以下是消息队列以下的大纲,本文主要介绍消息队列概述,消息队列应用场景和消息中间件示例(电商,日志系统)。 本次分享大纲 一、消息队列概述 消息队列中间件是分布式系统中重要的组件,主要解决应用耦合,异步消息,流量削锋等问题。实现高性能,高可用,可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。 ...
分类:
Web程序 时间:
2016-04-19 10:08:08
阅读次数:
343
参考:http://www.infoq.com/cn/articles/apache-kafka?utm_campaign=infoq_content&utm_source=infoq&utm_medium=feed&utm_term=global 存储分布式(用zookeeper协调); kafk ...
分类:
其他好文 时间:
2016-04-18 20:40:59
阅读次数:
121
支付宝钱包系统架构内部剖析(架构图) 支付宝系统架构概况 典型处理默认 资金处理平台 财务会计 支付清算 核算中心 交易 柔性事务 支付宝的开源分布式消息中间件–Metamorphosis(MetaQ) Metamorphosis (MetaQ) 是一个高性能、高可用、可扩展的分布式消息中间件,类似 ...
分类:
其他好文 时间:
2016-04-11 08:49:59
阅读次数:
656