一,kafka是什么？ kafka是一个高吞吐的分布式消息队列系统。二,特点： 是生产者消费者模式，先进先出（FIFO）保证顺序，自己不丢数据，默认每隔7天清理数据。三,消息列队常见场景： 系统之间解耦合、 峰值压力缓冲、 异步通信。四,Spark Streaming + kafka优点： 解耦 缓 ...
分类：
其他好文 时间：
2018-07-22 14:03:26
阅读次数：
154
大型网站架构从来都不是一个预先定义的架构，而是一个演进式的架构。很少有一个网站从建站开始，就能够因具备大型网站的所有属性而一成不变的，从最简单的LAMP架构，再到基于IOE的大型集中式应用架构，再演变成时下的分布式应用架构，随着网站用户规模的扩大，架构也在不断演进。从实体机到虚拟机再到当前流行的Docker技术，从单机房到同城多机房再到异地多活，从LAMP到J2EE再到各种分布式中间件如服务框架、分布式消息队列、配置管理中间件、分布式数据访问层，由简至繁的艰难蜕变，也正是一个网站从小变大由弱变强的成长历程，哪里有挑战，哪里才会有变革，这正是作为技术人建功立业的时刻。
分类：
Web程序 时间：
2018-07-10 14:36:50
阅读次数：
177
我们知道，在早期的RocketMQ版本中，是有依赖ZK的。而现在的版本中，是去掉了对ZK的依赖，转而使用自己开发的NameSrv。 并且这个NameSrv是无状态的，你可以随意的部署多台，其代码也非常简单，非常轻量。 那不禁要问了：ZooKeeper是业界用来管理集群的一个非常常用的中间件，比如Ka ...
分类：
其他好文 时间：
2018-07-06 17:56:59
阅读次数：
315
RabbitMQ 这个消息中间件，其实公司最近的项目中有用到，但是一直没有系统的整理，最近看完了《RabbitMQ实战 高效部署分布式消息队列》这本书，所以顺便写写。 那么关于 RabbitMQ 是什么？大家可以首先参考官网：http://www.rabbitmq.com 。这里我大概的介绍一下： ...
分类：
其他好文 时间：
2018-06-28 22:56:18
阅读次数：
216
概述：ZooKeeper是一种为分布式应用所设计的高可用、高性能且一致的开源协调服务，它提供了一项基本服务：分布式锁服务。由于ZooKeeper的开源特性，后来的开发者在分布式锁的基础上，摸索了出了其他的使用方法：配置维护、组服务、分布式消息队列、分布式通知/协调等。在分布式协调技术方面做得比较好的就是Google的Chubby还有Apache的ZooKeeper都是分布式锁的实现者。Chbby是
分类：
其他好文 时间：
2018-06-11 19:36:03
阅读次数：
229
本系列是「RabbitMQ实战：高效部署分布式消息队列」书籍的总结笔记。上一篇总结了可能出现的异常场景，并对RabbitMQ提供的可用性保证进行了分析，在出现服务器宕机后，仍然可以正常服务。另外，需要尽快恢复异常的服务器，重新加入集群，推送未消费的消息，通过监控可第一时间接收到错误并进行处理。另外，我们想主动了解消息堆积和消费的情况，以及服务器节点的压力，RabbitMQ提供了几种方式便捷、直观的
分类：
其他好文 时间：
2018-05-21 14:33:07
阅读次数：
140
本系列是「RabbitMQ实战：高效部署分布式消息队列」书籍的总结笔记。上一篇介绍了各种场景下的最佳实践，大部分场景可以使用「发后即忘」的模式，不需要响应，如果需要响应，可以使用RabbitMQ的RPC模型。RabbitMQ以异步的方式解耦系统间的关系，调用者将业务请求发送到Rabbit服务器，就可以返回了，Rabbit会确保请求被正确处理，即使遇到网络异常、Rabbit服务器崩溃、整个机房断电等
分类：
其他好文 时间：
2018-05-14 13:21:14
阅读次数：
177
本系列是「RabbitMQ实战：高效部署分布式消息队列」书籍的总结笔记。通过前2篇的介绍，了解了消息通信的主要元素和交互过程，以及如何运行和管理RabbitMQ，这篇将站在开发模式的角度理解「面向消息通信」带来的好处，以及在各种场景下的最佳实践。通过介绍，你会了解到：面向消息通信的好处发后即忘模型用RabbitMQ实现RPC面向消息通信的好处主要从异步状态思维、处理能力扩展性、集成复杂度方面，说明
分类：
其他好文 时间：
2018-05-14 13:17:10
阅读次数：
151
本系列是「RabbitMQ实战：高效部署分布式消息队列」书籍的总结笔记。上一篇介绍了AMQP消息通信，包括队列、交换器和绑定，通过虚拟主机还可以隔离数据和权限，消息持久化和发送方确认模式确保了消息不丢失。本篇主要介绍如何运行和管理RabbitMQ，在介绍之前，会有个DEMO演示消息发送和接收，一方面对AMQP的元素有更直观的认识，一方面为后面介绍监控做数据来源。通过介绍，你会了解到：消息发送和接收
分类：
其他好文 时间：
2018-05-11 10:44:30
阅读次数：
188
本系列是「RabbitMQ实战：高效部署分布式消息队列」书籍的总结笔记。前段时间总结完了「深入浅出MyBatis」系列，对MyBatis有了更全面和深入的了解，在掘金社区也收到了一些博友的喜欢，很高兴。另外，短暂的陪产假就要结束了，小宝也二周了，下周二就要投入工作了，希望自己尽快调整过来，加油努力。从本篇开始总结「RabbitMQ实战」系列的阅读笔记，RabbitMQ是一个开源的消息代理和队列服务
分类：
其他好文 时间：
2018-05-11 10:37:10
阅读次数：
138
