1.什么是Celery? Celery 是芹菜Celery 是基于Python实现的模块, 用于执行异步定时周期任务的其结构的组成是由 1.用户任务 app 2.管道 broker 用于存储任务 官方推荐 redis rabbitMQ / backend 用于存储任务执行结果的 3.员工 worke ...
分类：
其他好文 时间：
2020-06-23 21:44:42
阅读次数：
72
1 任务调度利器：APScheduler 2 分布式的队列：celery 3 绘图组件：Matplotlib 、 Seaborn 4 ORM框架：SQLAlchemy 、 Peewee 5 web开发框架：Flask 、 Django、Tornado 6 机器学习：Pytorch、TensorFlo ...
分类：
编程语言 时间：
2020-06-23 13:19:34
阅读次数：
80
linux中，对不同路径下的文件，系统默认指定了不同的操作权限（读/写/执行），出现这个问题是由于文件的权限不足造成的。（路径为/opt/lampp/htdocs/LearnPHP_jayce/hello.php）。 为其父级目录指定可读可写可执行权限： cd /opt/lampp/htdocs s ...
分类：
系统相关 时间：
2020-06-21 11:52:11
阅读次数：
75
异步邮件验证需要使用celery以及django的celery框架 pip install celery pip install django-celery celery需要中间任务队列支持，这里使用rabbitmq rabbitmq MQ全称为Message Queue, 是一种分布式应用程序的的 ...
分类：
其他好文 时间：
2020-06-20 19:50:23
阅读次数：
63
1.安装celery pip install -U celery -i https://pypi.douban.com/simple ##-U是指update的意思 2.创建mycelery目录 luffyapi/ ├── mycelery/ ├── config.py # 配置文件 ├── __i ...
分类：
编程语言 时间：
2020-06-20 17:00:26
阅读次数：
66
错误描述：网上查了一下资料，要修改系统资源限制vi/etc/security/limits.d/20-nproc.confsoftnproc4096rootsoftnprocunlimited修改为softnprocunlimitedrootsoftnprocunlimited保存退出就没有问题了
分类：
系统相关 时间：
2020-06-17 16:54:37
阅读次数：
249
如果想在任务成功或者失败额外做点事，可以重写Task类。 tasks.py from __future__ import absolute_import, unicode_literals from .celery import app from celery.task import Task cl ...
分类：
其他好文 时间：
2020-06-16 00:47:15
阅读次数：
358
from selenium import webdriver import logging import time from selenium.common.exceptions import NoSuchElementException, WebDriverException from retry ...
分类：
其他好文 时间：
2020-06-15 21:23:05
阅读次数：
84
简介：Tenacity是一个通用的retry库，简化为任何任务加入重试的功能。 不懂这个库怎么用， 很简单，哦对了，可能还需要你知道装饰器就是那个@啦就够了，上菜！ import tenacity import requests # 直接加上retry装饰器，代码抛出异常会一直重试，直到代码运行成功 ...
分类：
其他好文 时间：
2020-06-15 17:25:19
阅读次数：
51
CELERY 内存中的变量串数据 0X01 背景 周四周五，花了两天的时间，思考着celery内存泄露的问题。 情境如下： 在使用内存变量的时候(跨步骤调用变量)，突然想到一个问题，celery 多进程会不会共用一个变量，导致多个进程在运行的时候变量错乱了呢？ 比如在进程1中把target 设置为A ...
分类：
其他好文 时间：
2020-06-15 12:22:53
阅读次数：
58
