一、消息中间件的介绍 介绍 ? 消息队列 是指利用 高效可靠 的 消息传递机制 进行与平台无关的 数据交流,并基于 数据通信 来进行分布式系统的集成。 特点(作用) 应用解耦 异步通信 流量削峰 (海量)日志处理 消息通讯 …... 应用场景 根据消息队列的特点,可以衍生出很多场景,或者说很多场景都 ...
分类:
其他好文 时间:
2020-05-03 13:08:26
阅读次数:
66
参考1 参考2 一、中间件介绍 什么是中间件? 官方的说法:中间件是一个用来处理Django的请求和响应的框架级别的钩子。它是一个轻量、低级别的插件系统,用于在全局范围内改变Django的输入和输出。每个中间件组件都负责做一些特定的功能。 但是由于其影响的是全局,所以需要谨慎使用,使用不当会影响性能 ...
分类:
其他好文 时间:
2020-05-02 22:42:32
阅读次数:
65
主要基于从kafka0.11.0版本开始之后的版本进行描述 1、批处理 传统消息中间件,一次只发送单挑消息;kafka,一次发送多条消息,微批处理。 2、客户端优化 新版客户端摒弃单线程,采用双线程模式——主线程+Sender线程。 主线程负责将消息置入客户端缓存(缓存会将多个消息聚合为1个批次); ...
分类:
其他好文 时间:
2020-05-02 16:43:55
阅读次数:
56
简介 ? Redis 是一个开源(BSD许可)的,内存中的数据结构存储系统,它可以用作数据库、缓存和消息中间件。 它支持多种类型的数据结构,如 "字符串(strings)" , "散列(hashes)" , "列表(lists)" , "集合(sets)" , "有序集合(sorted sets)" ...
分类:
其他好文 时间:
2020-05-02 14:54:29
阅读次数:
57
喜欢关注个人公众号:java乐园消息队列中间件是分布式系统中重要的组件,主要解决应用耦合,异步消息,流量削锋等问题。实现高性能,高可用,可伸缩和最终一致性架构;是大型分布式系统不可缺少的中间件。目前使用较多的消息队列有ActiveMQ、RabbitMQ、Kafka、RocketMQ、MetaMQ等。springboot提供了对JMS系统的支持;springboot很方便就可以集成这些消息中间件。对
分类:
编程语言 时间:
2020-05-02 09:27:36
阅读次数:
55
1、Nginx是什么: Nginx是一个开源且高性能、可靠的HTTP中间件、代理服务。 2、常见的HTTP服务: HTTPD(Apache基金会);IIS(微软);GWS(Google),目前Nginx市场占有率越来越大。 3、Nginx优势:IO多路复用;轻量级;CPU亲和;sendfile工作机 ...
分类:
其他好文 时间:
2020-05-01 13:03:47
阅读次数:
64
[TOC] 安装 1.scrapy框架介绍 2.文件解释 3.项目说明 4.数据流向 5.常规操作 6.scrapy框架 模块详解 7.中间件 8.数据持久化 8.构建post请求 ...
分类:
其他好文 时间:
2020-05-01 10:51:08
阅读次数:
64
Zookeeper是分布式协调工具 应用场景 命名服务(注册中心) Dubbo注册中心 分布式配置中心(SpringCloud config)动态管理配置文件信息 消息中间件 事件通知(类似发布订阅) 分布式事务(全局协调者) 实现分布式锁 实现选举策略(类似哨兵机制) 实现本地动态负载均衡 (Du ...
分类:
其他好文 时间:
2020-04-30 23:27:12
阅读次数:
76
1.ps是什么? 要对进程进行检测和控制,首先必须要了解当前进程的情况,也就是需要查看进程的情况。 ps命令就是用来查看进程专用。通过ps可以确定哪些进程正在运行和运行的状态、是否结束、占用的资源等等 ps命令是用来显示瞬间进程的状态,并不是动态的;说如果查看动态的进程信息使用top命令 基本参数: ...
分类:
系统相关 时间:
2020-04-30 19:31:23
阅读次数:
87
1、批处理 传统消息中间件,一次只发送单挑消息;kafka,一次发送多条消息,微批处理。 2、数据压缩 日志格式,数据压缩,snappy, 3、顺序写入 只在log文件末尾追加 4、分区 参考: (1)https://mp.weixin.qq.com/s/G5nfLpPOr80pk1sHzrLuOA ...
分类:
其他好文 时间:
2020-04-30 09:49:07
阅读次数:
61