本篇主要介绍协程相关知识，但是在学习协程之前我们需要对迭代器和生成器做更加深入的了解，随后关于实现协程的方式进行了解，其中关于生成器、greenlet模块、gevent模块(重点)，最后便是关于进程、线程、携程的总结。 一、迭代器 关于迭代器已经在前面的文件中进行了介绍，但是分类是放在python的 ...
分类：
其他好文 时间：
2018-07-15 23:26:47
阅读次数：
217
以上能揭示由asyncio模块创建的携程的运行过程 用asyncio提供的@asyncio.coroutine可以把一个generator标记为coroutine类型，然后在coroutine内部用yield from调用另一个coroutine实现异步操作 以上代码，携程aa和携程bb共同组成一个 ...
分类：
编程语言 时间：
2018-07-13 01:16:54
阅读次数：
208
高性能爬虫方案： 多进程 多线程 利用“异步非阻塞”模块实现单线程并发请求。 本质 IO多路复用： 监听多个socket是否发生变化 IO多路复用的作用： 1.select，内部循环检测socket是否发生变化；最多只能检测1024个socket 2.poll，内部循环检测socket是否发生变化； ...
分类：
编程语言 时间：
2018-07-12 20:47:50
阅读次数：
180
一 gevent模块 Gevent是一个第三方库，可以轻松通过gevent实现并发同步或异步编程。在gevent中用到的主要模式是Greenlet，它是以C扩展模块形式接入Python的轻量级协程。Greenlet 全部运行在主程序操作系统进程的内部，但它们被协作式地调度。 遇到IO阻塞时会自动切换 ...
分类：
编程语言 时间：
2018-07-12 16:17:46
阅读次数：
140
一 引子 一：其中第二种情况并不能提升效率，只是让CPU能够雨露均沾，实现看起来所有任务都被“同时”执行的效果，如果多个任务都是纯计算的，这种切换反而会降低效率。为此我们可以基于yield来验证。yield本身就是一种在单线程下可以保存任务运行状态的方法，我们来简单复习一下： 单纯地切换反而会降低运 ...
分类：
编程语言 时间：
2018-07-12 13:20:33
阅读次数：
123
协程 协程，又称微线程，纤程。英文名Coroutine。一句话说明什么是线程：协程是一种用户态的轻量级线程。 协程拥有自己的寄存器上下文和栈。协程调度切换时，将寄存器上下文和栈保存到其他地方，在切回来的时候，恢复先前保存的寄存器上下文和栈。因此： 协程能保留上一次调用时的状态（即所有局部状态的一个特 ...
分类：
编程语言 时间：
2018-07-11 19:54:16
阅读次数：
165
我们介绍了多进程和多线程，这是实现多任务最常用的两种方式。现在，我们来讨论一下这两种方式的优缺点。 首先，要实现多任务，通常我们会设计Master-Worker模式，Master负责分配任务，Worker负责执行任务，因此，多任务环境下，通常是一个Master，多个Worker。 如果用多进程实现M ...
分类：
编程语言 时间：
2018-07-11 14:52:07
阅读次数：
148
1.gevent执行importgeventdeffunc1():print(‘func1start‘)gevent.sleep(2)print(‘func1end‘)deffunc2():print(‘func2start‘)gevent.sleep(1)print(‘func2end‘)deffunc3():print(‘func3start‘)gevent.sleep(0)print(‘fu
分类：
编程语言 时间：
2018-07-11 14:45:33
阅读次数：
131
协程，又称微线程，纤程。英文名Coroutine。 协程的概念很早就提出来了，但直到最近几年才在某些语言（如Lua）中得到广泛应用。 子程序，或者称为函数，在所有语言中都是层级调用，比如A调用B，B在执行过程中又调用了C，C执行完毕返回，B执行完毕返回，最后是A执行完毕。 所以子程序调用是通过栈实现 ...
分类：
编程语言 时间：
2018-07-11 14:39:04
阅读次数：
185
一、什么是线程？ 线程是操作系统能够进行运算调度的最小单位（程序执行流的最小单元）。它被包含在进程之中，是进程中的实际运作单位。一条线程指的是一个单一顺序的控制流，一个进程中可以并发多个线程，每条线程并行执行不同的任务。 一个标准的线程由线程ID，当前指令指针（PC），寄存器集合和堆栈组成。另外，线 ...
分类：
编程语言 时间：
2018-07-09 14:12:56
阅读次数：
125
