mq简介 mq 就是消息队列(Message Queue)。想必大家对队列的数据结构已经很熟悉了,消息队列可以简单理解为:把要传输的数据放在队列中,mq 就是存放和发送消息的这么一个队列中间件。在消息队列中,把数据放到消息队列的角色叫做 生产者,从消息队列中消费获取数据的叫做 消费者。 那么消息队列 ...
分类:
其他好文 时间:
2020-06-15 12:24:29
阅读次数:
57
Application.use() Application.router() express核心源码模拟 一、express.use() 1.1app.use([path,] callback [, callback ...]) 通过语法结构可以看到Application.use()参数分别有以下几 ...
分类:
其他好文 时间:
2020-06-14 23:33:02
阅读次数:
63
组件以及执行流程 -引擎找到要执行爬虫,并执行爬虫的start_requests 方法, 并得到一个迭代器。 -迭代器循环时会获取Request对象,而Request对象中封装了要访问的URL和回调函数。 -将所有的Request对象(任务)放到调试器中,用于以后被下载器下载 -下载器云调试器中获取 ...
分类:
其他好文 时间:
2020-06-14 16:35:50
阅读次数:
66
原文:RocketMQ系列(一)基本概念 RocketMQ是阿里出品的一款开源的消息中间件,让其声名大噪的就是它的事务消息的功能。在企业中,消息中间件选择使用RocketMQ的还是挺多的,这一系列的文章都是针对RocketMQ的,咱们先从RocketMQ的一些基本概念和环境的搭建开始聊起。 Rock... ...
分类:
其他好文 时间:
2020-06-14 14:32:52
阅读次数:
129
上一篇我们知道可以使用 app.use 注册中间件,但是 这样都写在 Startup 文件可能不是我们想要的。.NET Core 提供了 使用 UseMiddlewareExtensions 扩展中间件。我们看一下需要什么。 // Copyright (c) .NET Foundation. All ...
分类:
Web程序 时间:
2020-06-14 14:30:39
阅读次数:
68
0 专辑概述 etcd 是云原生架构中重要的基础组件,由 CNCF 孵化托管。etcd 在微服务和 Kubernates 集群中不仅可以作为服务注册与发现,还可以作为 key-value 存储的中间件。 《彻底搞懂 etcd 系列文章》将会从 etcd 的基本功能实践、API 接口、实现原理、源码分 ...
分类:
其他好文 时间:
2020-06-14 11:14:19
阅读次数:
88
最新互联网大厂面试真题、Java程序员面试策略(面试前的准备、面试中的技巧)请移步GitHub对于开发者来说,异步是一种程序设计的思想,使用异步模式设计的程序可以显著减少线程等待,从而在高吞吐量的场景中,极大提升系统的整体性能,显著降低时延。因此,像消息队列这种需要超高吞吐量和超低时延的中间件系统,在其核心流程中,一定会大量采用异步的设计思想。接下来,我们一起来通过一个非常简单的例子学习一下,使用
分类:
其他好文 时间:
2020-06-14 11:00:45
阅读次数:
56
最近很多人问RabbitMQ和Kafka要如何进行选择,甚至有一个风向:说是MQ性能不够了要切Kafka。且先不说成熟系统换组件的风险,光把那一坨沉淀了多年的醇酿翻新重构已然处于崩溃的边缘,蓦然回首,码是人非。 ? 选型最快的方式就是了解下晚出现的中间件的起源,因为他们在付出努力之前肯定做了一波详细 ...
分类:
其他好文 时间:
2020-06-13 19:14:57
阅读次数:
83
Pgpool-II模式初步浅析1.什么是pgpool-II简单通俗的来讲,pgpool-II是一个位于PostgreSQL服务器和PostgreSQL数据库客户端之间的中间件。pgpool-II主要提供负载均衡、连接池、复制、并行查询等等功能。Pgpool-ll可以运行在linux、solaris、FreeBSD以及基本上所有的类UNIX架构的平台。不支持Windows系统。2.Pgpool-ll
分类:
其他好文 时间:
2020-06-13 00:49:08
阅读次数:
310
在前面两篇文章介绍了下载器中间件的使用,这篇文章将会介绍爬虫中间件(Spider Middleware)的使用。 爬虫中间件 爬虫中间件的用法与下载器中间件非常相似,只是它们的作用对象不同。下载器中间件的作用对象是请求request和返回response;爬虫中间件的作用对象是爬虫,更具体地来说,就 ...
分类:
其他好文 时间:
2020-06-12 14:54:01
阅读次数:
66