1. celery 介绍 1. celery 应用举例 2. celery 有什么优点？ 3. celer 基本工作流程图 user : 用户程序，用于告知celery去执行一个任务 broker : 存放任务 （依赖RabbitMQ 或 Redis, 进行存储） worker : 执行任务 4. ...
分类：
其他好文 时间：
2020-02-07 17:00:30
阅读次数：
60
Kafka系列1：Kafka概况 Kafka是当前分布式系统中最流行的消息中间件之一，凭借着其高吞吐量的设计，在日志收集系统和消息系统的应用场景中深得开发者喜爱。本篇就聊聊Kafka相关的一些知识点。主要包括以下内容： Kafka简介 Kafka特点 Kafka基本概念 Kafka架构 Kafka的 ...
分类：
其他好文 时间：
2020-02-04 23:18:57
阅读次数：
78
什么是Clelery Celery是一个简单、灵活且可靠的，处理大量消息的分布式系统。专注于实时处理的异步任务队列。同时也支持任务调度。 Celery的架构由三部分组成，消息中间件（message broker），任务执行单元（worker）和任务执行结果存储（task result store）组 ...
分类：
其他好文 时间：
2020-01-31 23:01:41
阅读次数：
86
前端 VUE 接入层 DNS：阿里云 负载均衡：lvs+nginx/SLB/ELB 逻辑层 Java、Ｃ、Ｃ++、PHP、C# 存储层 MySQL/Redis 消息中间件 nsq 代码管理 gitlab 持续集成 jenkins 项目管理 redmind 名字服务 qconf zk 日志系统 elk ...
分类：
其他好文 时间：
2020-01-28 17:31:52
阅读次数：
64
简介数据结构String备份常用命令toc 简介 Redis是开源的内存数据库，它可以用作数据库、缓存和消息中间件。 Redis与其他key-value 缓存产品有以下三个特点： Redis支持数据的持久化，可以将内存中的数据保存在磁盘中，重启的时候可以再次加载进行使用。 Redis不仅仅支持简单的... ...
分类：
其他好文 时间：
2020-01-28 10:51:12
阅读次数：
66
使用Kafka作为消息中间件消费数据时，监控Kafka消费的进度很重要。其中，在监控消费进度的过程中，主要关注消费Lag。 常用监控Kafka消费进度的方法有三种，分别是使用Kafka自带的命令行工具、使用Kafka Consumer API和Kafka自带的JMX监控指标，这里介绍前两种方法。 注 ...
分类：
其他好文 时间：
2020-01-25 16:44:02
阅读次数：
120
公司选取Kafka作为一种消息中间件产品。考虑的问题会是： 选用什么消息中间件？ 为什么要用这个？ 好处与坏处？ 一、选用什么消息中间件，举例说明几种中间件产品的优势和缺点（选型分析）： ActiveMQ是老牌的消息中间件，但是问题在于没法确认ActiveMQ可以支撑互联网公司的高并发、高负载以及高 ...
分类：
其他好文 时间：
2020-01-23 12:47:01
阅读次数：
88
什么是消息中间件 消息中间件利用高效可靠的消息传递机制进行平台无关的数据交流，并基于数据通信来进行分布式系统的集成。通过提供消息传递和消息排队模型，它可以在分布式环境下扩展进程间的通信。对于消息中间件，常见的角色大致也就有Producer（生产者）、Consumer（消费者） 常见的消息中间件产品: ...
分类：
其他好文 时间：
2020-01-21 16:36:33
阅读次数：
89
在实际开发过程中，服务与服务之间通信经常会使用到消息中间件，而以往使用了中间件比如RabbitMQ，那么该中间件和系统的耦合性就会非常高，如果我们要替换为Kafka那么变动会比较大，这时我们可以使用SpringCloudStream来整合我们的消息中间件，来降低系统和中间件的耦合性。 一、消息中间的 ...
分类：
编程语言 时间：
2020-01-18 18:04:50
阅读次数：
252
ActiveMQ 基本定义 什么是消息中间件？ 消息中间件顾名思义实现的就是在两个系统或两个客户端之间进行消息传送。 什么是ActiveMQ？ ActiveMQ 是一种开源的基于JMS（Java Message Servie）规范的一种消息中间件的实现，ActiveMQ的设计目标是提供标准的，面向消 ...
分类：
其他好文 时间：
2020-01-18 01:34:18
阅读次数：
96
