Kafka概述 定义 Kafka是一个分布式的基于发布/订阅模式的消息队列（Message Queue），主要应用于大数据实时处理领域。 传统消息队列的应用场景 使用消息队列的好处 1:解耦 允许你独立的扩展或修改两边的处理过程，只要确保它们遵守同样的接口约束。 2:可恢复性 系统的一部分组件失效时 ...
分类：
其他好文 时间：
2021-01-02 10:52:13
阅读次数：
0
################# 开发一个电商产品1，Python+django+redis+mysql2，消息队列3，缓存技术，4，ES技术5，日志技术6，docker技术7，服务器，8， ###################### ###################### ...
分类：
其他好文 时间：
2020-12-29 11:38:44
阅读次数：
0
在实际项目中是否用过消息队列？ 这里简单介绍一下Redis消息队列吧，之前有一个服务号消息推送就是用的Redis来做的，因为业务比较单一所以就拿Redis来做； 第一步：创建推送任务； 1.区分任务是即时任务还是延时任务； 2.如果是延时任务可以使用zset(key,time,val),因为zset ...
分类：
其他好文 时间：
2020-12-24 12:01:14
阅读次数：
0
本学习路径主要是面向大厂，掌握初中级系统架构师具备的核心技术，其中涵盖的核心内容包括：Spring Boot、缓存Redis、消息队列RabbitMQ、分布式服务调度Dubbo、注册中心与统一协调中间件ZooKeeper、综合中间件Redisson、 Guava、分布式锁、死信队列、分布式限流等等！
分类：
编程语言 时间：
2020-12-19 13:27:21
阅读次数：
6
RabbitMqBase消息队列小结 虽然这个消息队列我只是知道应用场景在哪里，还没有实际操作到，但是原理还是要知道的。这些知识点就像珍珠，万一哪天就用到了。在没具体学习之前，我一直在想: 这玩意不就是个队列吗。还能玩出花来？结果，一研究，还真的打脸了。 首先，这玩意用的是AMQP协议，并且只是占用 ...
分类：
其他好文 时间：
2020-12-18 12:51:10
阅读次数：
3
在系统架构中引入了消息队列时，出发点有很多。下面记录一些这方面的思考。什么是消息队列计算机科学里，消息队列和邮箱都是被用于进程间通信或同一进程内线程间通信的软件工程组件。它们使用队列传递报文－控制权或内容的通过。上面是维基百科的解释，大概是消息队列产生的最初原因。它是两个独立资源之间的桥梁，避免了资源之间的直接依赖及相互影响。消息队列的两个主要元素是：消息和队列。消息：独立的资源之间沟通内容的载体
分类：
其他好文 时间：
2020-12-18 12:17:07
阅读次数：
2
实现原理 当使用多进程的时候。多个socketio服务器通过消息队列来沟通之间的客户端sid。若发现该sid在自己的连接中。就由该进程处理发送给其下面连接的客户端 详细的可以看这里 socket.io要实现多进程以及广播，房间等功能，势必需要接入一个redis之类的消息队列，进而socket.io的 ...
分类：
编程语言 时间：
2020-12-10 11:31:08
阅读次数：
14
一日一技：隐患——redis-py的blpop可能由于网络波动导致收不到信息摄影：产品经理厨师：kingname我们在使用Redis做消息队列的时候，常常使用列表这个数据结构，并写出如下的代码：importredisimporttimeclient=redis.Redis()whileTrue:data=client.lpop(‘key‘)ifnotdata:time.sleep(5*60)con
分类：
其他好文 时间：
2020-12-08 12:57:00
阅读次数：
15
Kafka里面的信息是如何被消费的？摄影：产品经理跟着产品经理去苏州吃面作为一个爬虫工程师，Kafka对你而言就是一个消息队列，你只需要掌握如何向里面写入数据，以及如何读取数据就可以了。请谨记：使用Kafka很容易，但对Kafka集群进行搭建、维护与调优很麻烦。Kafka集群需要有专人来维护，不要以为你能轻易胜任这个工作。”本文，以及接下来的几篇针对Kafka的文章，我们面向的对象都是爬虫工程师或
分类：
其他好文 时间：
2020-12-08 12:03:19
阅读次数：
3
前言 我在刚接触使用中间件的时候，发现，中间件的使用并不是最难的，反而是中间件的下载，安装，配置才是最难的。 所以，这篇文章我们从头开始学习RabbitMq，真正的从头开始。 关于消息队列 其实消息队列没有那么神秘，我们这样想一下，用户访问网站，最终是要将数据以HTTP的协议的方式，通过网络传输到主 ...
