前言 项目中用到了Kafka 这种分布式消息队列来处理日志,本文将对Kafka的基本概念和原理做一些简要阐释 Kafka 的基本概念 官网解释: Kafka是最初由Linkedin公司开发,是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的分布式日志系统(也可以当做MQ系统),常 ...
分类:
其他好文 时间:
2019-11-08 17:37:05
阅读次数:
84
一、为什么要使用MQ消息中间件? 一个用消息队列的人,不知道为啥用,有点尴尬。没有复习这点,很容易被问蒙,然后就开始胡扯了。 回答:这个问题,咱只答三个最主要的应用场景,不可否认还有其他的,但是只答三个主要的,即以下六个字: 解耦、异步、削峰 1、解耦 传统模式: 传统模式的缺点: 系统间耦合性太强 ...
分类:
其他好文 时间:
2019-11-06 09:15:59
阅读次数:
87
链接: https://codeforces.com/gym/102394/problem/K 题意: DreamGrid is the keeper of n rabbits. Initially, the i th (1≤i≤n) rabbit has a weight of wi. Every ...
分类:
其他好文 时间:
2019-11-05 13:26:23
阅读次数:
140
一 . 系统说明: A系统阿里云平台,5台集群,每台:1-2核,内存6G,带宽上限2M,磁盘1G。 基于tomcat容器,主要业务消费rocketmq,再pegion(服务治理工具)调用第三方服务。 同时接入20个左右topic的mq,并每一次mq都会调用一次第三方服务,第三方服务有B,C,D等系统 ...
分类:
编程语言 时间:
2019-11-04 19:37:02
阅读次数:
213
前言在分布式系统中,我们广泛运用消息中间件进行系统间的数据交换,便于异步解耦。现在开源的消息中间件有很多,前段时间产品 RocketMQ (MetaQ的内核) 也顺利开源,得到大家的关注。 概念MQ简介MQ,Message queue,消息队列,就是指保存消息的一个容器。具体的定义这里就不类似于数据 ...
分类:
其他好文 时间:
2019-11-04 15:54:24
阅读次数:
96
http://blog.csdn.net/javahongxi/article/details/54411464 [京东技术]京东的MQ经历了JQ->AMQ->JMQ的发展,其中JQ的基于关系数据库,严格意义上讲称不上消息中间件,JMQ的存储是JFS和HBase,AMQ即ActiveMQ,本文说说J ...
分类:
其他好文 时间:
2019-11-04 13:15:40
阅读次数:
82
1.端口及说明: 举例说明 我们访问RabbitMQ管理界面可以访问如下: http://localhost:15672/ 我们连接RabbitMQ的话就要用client端通信口: server: amqp://guest:guest@localhost:5672/ 2.重启mq服务 net sto ...
分类:
其他好文 时间:
2019-11-01 11:15:38
阅读次数:
80
Docker的安装: (1)yum 包更新到最新 > yum update (2)安装需要的软件包, yum-util 提供yum-config-manager功能,另外两个是devicemapper驱动依赖的 > yum install -y yum-utils device-mapper-per ...
分类:
其他好文 时间:
2019-11-01 11:05:56
阅读次数:
90
一、背景MQ组件是系统架构里必不可少的一门利器,设计层面可以降低系统耦合度,高并发场景又可以起到削峰填谷的作用,从单体应用到集群部署方案,再到现在的微服务架构,MQ凭借其优秀的性能和高可靠性,得到了广泛的认可。随着数据量增多,系统压力变大,开始出现这种现象:数据库已经更新了,但消息没发出来,或者消息先发了,但后来数据库更新失败了,结果研发童鞋各种数据修复,这种生产问题出现的概率不大,但让人很郁闷。
分类:
其他好文 时间:
2019-10-29 18:18:37
阅读次数:
103
RabbitMQ安装 我这里安装是使用阿里云的CentOS7.5来安装的,使用CentOS版本低于7的可能会报错。 1.安装rabbitmq所需要的依赖包 输入$ yum install build-essential openssl openssl-devel unixODBC unixODBC- ...
分类:
编程语言 时间:
2019-10-29 17:08:34
阅读次数:
117