码迷,mamicode.com
首页 > 其他好文 > 详细

使用evenlet包实现 concurrent.futures.executor包的鸭子类

时间:2019-07-08 23:50:49      阅读:134      评论:0      收藏:0      [点我收藏+]

标签:BMI   ret   manager   ini   int   key   文件   warnings   rom   

 

适配成同一个同样的公有方法。

 

# -*- coding: utf-8 -*-
# @Author  : ydf
# @Time    : 2019/7/3 10:35
import time
import warnings

from eventlet import greenpool, monkey_patch, patcher, Timeout

from app.utils_ydf import LogManager, nb_print


def check_evenlet_monkey_patch(raise_exc=True):
    if not patcher.is_monkey_patched(socket):
        if raise_exc:
            warnings.warn(f检测到没有打 evenlet 包的猴子补丁 ,请在文件首行加上     import eventlet;eventlet.monkey_patch(all=True) )
            raise Exception(检测到没有打 evenlet 包的猴子补丁 ,请在文件首行加上    import eventlet;eventlet.monkey_patch(all=True))
    else:
        return 1


logger_evenlet_timeout_deco = LogManager(logger_evenlet_timeout_deco).get_logger_and_add_handlers()


def evenlet_timeout_deco(timeout_t):
    def _evenlet_timeout_deco(f):
        def __evenlet_timeout_deco(*args, **kwargs):
            timeout = Timeout(timeout_t, )
            # timeout.start()  # 与gevent不一样
            try:
                f(*args, **kwargs)
            except Timeout as t:
                logger_evenlet_timeout_deco.error(f函数 {f} 运行超过了 {timeout_t} 秒)
                if t is not timeout:
                    nb_print(t)
                    # raise  # not my timeout
            finally:
                timeout.cancel()

        return __evenlet_timeout_deco

    return _evenlet_timeout_deco


class CustomEventletPoolExecutor(greenpool.GreenPool):
    def __init__(self, *args, **kwargs):
        super().__init__(*args, **kwargs)
        check_evenlet_monkey_patch()

    def submit(self, *args, **kwargs):  # 保持为一直的公有用法。
        # nb_print(args)
        self.spawn_n(*args, **kwargs)
        # self.spawn_n(*args, **kwargs)

    def shutdown(self):
        self.waitall()


if __name__ == __main__:
    # greenpool.GreenPool.waitall()
    monkey_patch(all=True)


    def f2(x):

        time.sleep(1)
        nb_print(x)

    pool = CustomEventletPoolExecutor(4)

    for i in range(15):
        nb_print(f放入{i})
        pool.submit(evenlet_timeout_deco(0.8)(f2), i)

 

使用evenlet包实现 concurrent.futures.executor包的鸭子类

标签:BMI   ret   manager   ini   int   key   文件   warnings   rom   

原文地址:https://www.cnblogs.com/ydf0509/p/11154620.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!