一、概念 1、什么是kafka Kafka是由Apache软件基金会开发的一个开源的分布式流处理平台，由Scala和Java编写。Kafka是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），它可以处理消费者在网站中的所有动作流数据。 Kafk ...
分类：
其他好文 时间：
2019-10-15 09:57:16
阅读次数：
70
一.本项目涉及编程语言java,scala,python，涉及的技术如下： 1.微服务架构： springboot springcloud mybatisplus shiro 2.全文检索技术 solr 3.日志系统技术 elk 4.消息中间件 kafka 5.数据库技术 mysql redis m ...
分类：
其他好文 时间：
2019-10-13 13:14:22
阅读次数：
99
1、前言 从druid的0.11版本开始，我就开始关注它，每一次的版本的更新，druid都会使用户体验、性能更好，从以前手写配置文件到可视化的界面操作，从实时节点进行任务提交到现在的索引服务等 流处理： 日志监控（Flume/Airflow） > 消息中间件（kafka、MQ） > 流处理（spar ...
分类：
Web程序 时间：
2019-10-11 18:03:32
阅读次数：
122
一、MQ 全称为 Message Queue, 消息队列（ MQ ） 是一种应用程序对应用程序的通信方法。应用程序通过读写出入队列的消息（针对应用程序的数据）来通信，而无需专用连接来链接它们。 消息传递指的是程序之间通过在消息中发送数据进行通信，而不是通过直接调用彼此来通信，直接调用通常是用于诸如远 ...
分类：
其他好文 时间：
2019-10-10 20:27:56
阅读次数：
84
一、Redis 介绍 1、Redis 是一个开源（BSD许可）的，内存中的数据结构存储系统，它可以用作数据库、缓存和消息中间件。 2、它支持多种类型的数据结构，如： 字符串（strings）， 散列（hashes）， 列表（lists）， 集合（sets）， 有序集合（sorted sets） 与范 ...
分类：
其他好文 时间：
2019-10-09 19:00:46
阅读次数：
89
前言 先看一下Redis是一个什么东西。官方简介解释到： 先看一下Redis是一个什么东西。官方简介解释到： Redis是一个基于BSD开源的项目，是一个把结构化的数据放在内存中的一个存储系统，你可以把它作为数据库，缓存和消息中间件来使用。同时支持strings，lists，hashes，sets， ...
分类：
其他好文 时间：
2019-10-09 15:51:40
阅读次数：
111
<dependencies> <dependency> <groupId>org.apache.activemq</groupId> <artifactId>activemq-client</artifactId> <version>5.13.4</version> </dependency> </ ...
分类：
其他好文 时间：
2019-10-09 12:11:50
阅读次数：
75
1、什么是消息中间件？ 关注于数据的发送和接受，利用高效可靠的异步消息传递机制集成分布式系统。 2、什么是JMS? Java消息服务（java Message Service）即JMS，是一个java平台中关于面向消息中间件的API，用于在两个应用程序之间或者分布式系统中发送消息，进行异步通信。 3 ...
分类：
其他好文 时间：
2019-10-06 13:22:47
阅读次数：
109
消息队列 原理 消息存储 Pull方式 Push方式 高可用 异常重试 生产者端的消息失败 消费者端的消失失败 顺序性 对比 消息队列 原理 消息存储 Pull方式 Push方式 高可用 异常重试 生产者端的消息失败 消费者端的消失失败 顺序性 对比 消息队列 作用:异步,解藕,峰值处理,可恢复,顺 ...
分类：
其他好文 时间：
2019-10-04 09:35:29
阅读次数：
68
1.消息中间件 消息中间件利用高效可靠的消息传递机制进行平台无关的数据交流，并基于数据通信来进行分布式系统的集成。通过提供消息传递和消息排队模型，它可以在分布式环境下扩展进程间的通信。对于消息中间件，常见的角色大致也就有Producer（生产者）、Consumer（消费者）。 2.常见的中间件产品 ...
分类：
其他好文 时间：
2019-09-30 21:40:55
阅读次数：
186
