Apache Kafka是分布式发布-订阅消息系统，在 kafka官网上对 kafka 的定义：一个分布式发布-订阅消息传递系统。 它最初由LinkedIn公司开发. Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。Kafka是一种快速、可扩展的、设计内在就是分布式的，分区 ...
分类：
其他好文 时间：
2018-08-28 10:30:12
阅读次数：
148
消息中间件metaq安装并注册到zookper集群 项目地址 https://github.com/killme2008/Metamorphosis Memorphosis是一个消息中间件，它是linkedin开源MQ——kafka的Java版本，针对淘宝内部应用做了定制和优化。Metamorpho ...
分类：
Web程序 时间：
2018-08-25 00:37:18
阅读次数：
254
一、Azkaban简介 Azkaban是由Linkedin开源的一个批量工作流任务调度器。用于在一个工作流内以一个特定的顺序运行一组工作和流程。Azkaban定义了一种KV文件格式来建立任务之间的依赖关系，并提供一个易于使用的web用户界面维护和跟踪你的工作流。简而言之就是一个工作流调度系统。 为什 ...
分类：
其他好文 时间：
2018-08-21 19:39:59
阅读次数：
175
一、简介 1.1 概述 Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），常见可以用于web/nginx日志、访问日志，消息服务等等，Linkedin于2010年贡献给了Apache基金会并成为顶级 ...
分类：
其他好文 时间：
2018-08-01 22:16:03
阅读次数：
206
业界对于消息的传递有多种方案和产品， 本文就比较有代表性的两个MQ(rabbitMQ,kafka)进行阐述和做简单的对比 在应用场景方面，RabbitMQ,遵循AMQP协议，由内在高并发的erlanng语言开发，用在实时的对可靠性要求比较高的消息传递上。 kafka是Linkedin于2010年12 ...
分类：
其他好文 时间：
2018-07-31 23:38:59
阅读次数：
185
导语 ： 消息队列是分布式系统中重要的组件，在很多生产环境如商品抢购等需要控制并发量的场景下都需要用到。最近组内需要做流水server的选型升级，这里对消息队列及常见的消息队列进行了一次调研，整理了相关资料，分享给大家。一、消息队列(MQ)概述消息队列（Message Queue），是分布式系统中重要的组件，其通用的使用场景可以简单地描述为：当不需要立即获得结果，但是并发量又需要进行控制的时候，差
分类：
其他好文 时间：
2018-07-13 01:13:05
阅读次数：
189
六月初，微软正式宣布以75亿美元收购GitHub。除了微软和GitHub以外，也许对这笔并购最在意的，正是微软的同城敌友，亚马逊。在我看来，GitHub也许是微软史上最好的收购。75亿美元贵不贵？显然不便宜。在微软历史上210次公开的收购案里，GitHub的收购金额只排在LinkedIn的262亿美元以及Skype的85亿美元之后，和72亿美元收购的诺基亚大致相当。目前，GitHub拥有大约200
分类：
其他好文 时间：
2018-06-26 18:01:38
阅读次数：
204
Kafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发，之后成为Apache项目的一部分。Kafka是一个分布式的，可划分的，冗余备份的持久性的日志服务。它主要用于处理活跃的流式数据。 ...
分类：
其他好文 时间：
2018-06-25 19:02:06
阅读次数：
212
在这个信息时代高速发展的情况下，很多人会对自己该往哪个方向发展感到迷茫，下面我就浅显的给大家介绍一下五大流行区域的发展前景。大数据的发展前景：当前大数据行业真的是人才稀缺吗?学了几年后，大数据行业会不会产能过剩?大数据行业最终需要什么样的人才?接下来就带你们看看分析结果：当前大数据行业真的是人才稀缺吗?对!未来人才缺口150万，数据分析人才最稀缺。先看大数据人才缺口有多大?根据LinkedIn(领
分类：
编程语言 时间：
2018-06-08 20:41:01
阅读次数：
556
Kafka 入门和 Spring Boot 集成 标签：博客 [TOC] 概述 kafka 是一个高性能的消息队列，也是一个分布式流处理平台（这里的流指的是数据流）。由java 和 Scala 语言编写，最早由 LinkedIn 开发，并 2011年开源，现在由 Apache 开发维护。 应用场景 ...
分类：
编程语言 时间：
2018-06-06 15:53:44
阅读次数：
199
