[TOC] Celery 一、官方 Celery 官网：http://www.celeryproject.org/ Celery 官方文档英文版：http://docs.celeryproject.org/en/latest/index.html Celery 官方文档中文版：http://docs ...
分类：
其他好文 时间：
2020-03-05 13:22:52
阅读次数：
63
上篇介绍了一个简单的UDP服务框架，但是面对海量的请求，同步框架显然有点力不从心。于是在我接手好友系统的接口服务的时候，就采用了一个强大的异步框架——MCP框架。MCP框架是一个多进程异步框架，支持UDP、TCP和http，结构很灵活，可以根据需要将各组件像搭积木一样组装。下面是MCP最基础的进程结构。分为3种进程：CCD、MCD和DCC。CCD是面向客户端的进程，是服务的入口，负责处理前端的请求
分类：
其他好文 时间：
2020-01-28 21:20:49
阅读次数：
101
Go语言出现后，Java还是最佳选择吗？ https://blog.csdn.net/b0Q8cpra539haFS7/article/details/102848673 感觉用协程不太安全 阿里这样的还好一些 要是重型应用 长事务流程的 感觉容易出事呢。 阿里妹导读：随着大量新生的异步框架和支持协 ...
分类：
编程语言 时间：
2020-01-11 16:45:34
阅读次数：
83
一、什么是celery Celery是一个简单、灵活且可靠的，处理大量消息的分布式系统 专注于实时处理的异步任务队列 同时也支持任务调度 二、Celery架构 Celery的架构由三部分组成，消息中间件（message broker）、任务执行单元（worker）和 任务执行结果存储（task re ...
分类：
其他好文 时间：
2019-11-02 18:11:17
阅读次数：
75
tornado的同步框架与其他web框架相同都是处理先来的请求，如果先来的请求阻塞，那么后面的请求也会处理不了。一直处于等待过程中。但是请求一旦得到响应，那么： 请求发送过来后，将需要的本站资源直接返回给客户端 请求发送过来后，本站没有需要的资源，从其它站点获取过来，再返回给客户端 一、Tornad ...
分类：
其他好文 时间：
2019-10-08 19:21:31
阅读次数：
99
一.项目问题： 1. 你写爬虫的时候都遇到过什么反爬虫措施，你最终是怎样解决的 1、基于User-agent反爬 2、基于IP地址进行反爬 2. 你写爬虫的时候 使用的什么框架 选择这个框架的原因是什么 python中的爬虫框架： pyspider、crawley scrapy，这是一个异步框架，基 ...
分类：
其他好文 时间：
2019-10-07 00:42:06
阅读次数：
189
基于select server端 client端 主要作用：定制异步框架 ...
分类：
编程语言 时间：
2019-10-05 14:28:43
阅读次数：
82
前言： 最近有个项目需要上线，是python中sanic网络异步框架写的，并且要求使用docker+nginx来部署项目实现负载均衡，于是乎百度了sanic项目部署，基本上都是基于docker+gunicorn部署sanic项目这篇文章，里面讲的也稍稍微有些简略，不过对于小白特别不友好，按步骤操作肯 ...
分类：
其他好文 时间：
2019-08-22 19:08:13
阅读次数：
110
python 异步MySQL存库 对于异步框架而言，这些延迟是无法接受的。因此, Twisted 提供了 twisted.enterprise.adbapi, 遵循DB-API 2.0协议的一个异步封装。adbapi 在单独的线程里面进行阻塞数据库操作, 当操作完成的时候仍然通过这个线程来进行回调。 ...
分类：
数据库 时间：
2019-07-01 12:18:17
阅读次数：
134
异步就是回调 异步 = 非阻塞+循环 select只能完成IO多路复用，不能完成异步 IO多路复用 >监听多个socket对象，这个过程是同步的 利用其特性可以开发异步模块 异步IO：非阻塞的socket + IO多路复用 自定义异步框架 ...
分类：
其他好文 时间：
2019-02-04 08:58:19
阅读次数：
219
