啥是异步IO 众所周知,CPU速度太快,磁盘,网络等IO跟不上. 而程序一旦遇到IO的时候,就需要等IO完成才能进行才能进行下一步的操作. 严重拖累了程序速度. 因为一个IO操作就阻塞了当前线程,导致其他代码无法执行,所以我们必须使用多线程或者多进程来并发的执行代码. 但是多线程或者多进程虽然解决了 ...
分类:
编程语言 时间:
2020-02-26 23:22:55
阅读次数:
161
1. 多进程与多线程 多进程 : 每个独立执行的任务就是一个进程 操作系统将时间划分为多个时间片,在每个时间片内将CPU分配给某一个任务,时间片结束,CPU将自动回收,再分配给其他任务 多进程的缺点:比较笨重不好切换 多线程 : 一个程序可包多个子任务,可串并行 一个子任务可以称为一个线程 在一个线 ...
分类:
编程语言 时间:
2020-02-25 14:42:52
阅读次数:
85
多进程(状态:运行、阻塞、挂起阻塞、就绪、挂起就绪)进程是资源(CPU、内存等)分配的基本单位,它是程序执行时的一个实例。多线程(状态:创建、就绪、运行、阻塞、死亡五个状态)线程是程序执行时的最小单位,它是进程的一个执行流,是CPU调度和分派的基本单位,一个进程可以由很多个线程组成,线程间共享进程的 ...
分类:
编程语言 时间:
2020-02-23 22:13:47
阅读次数:
70
一、程序:是一个指令的集合 二、进程:正在执行的程序;或者说:当运行一个程序,你就启动了一个进程 1.编写完的代码,没有运行时,为程序,正在运行的代码为进程 2.程序是静态的,进程是活动的 (1)、多进程中每个进程中所有数据(包括全局变量)都各自拥有一份,互不影响。 (2)、程序开始运行时,首先会创 ...
分类:
编程语言 时间:
2020-02-22 18:34:56
阅读次数:
108
并发编程之多进程 进程理论 进程 进程:正在运行的一个过程或一个任务。负责执行任务的是cpu。 程序与进程的区别:程序只是一堆代码,而进程指的是程序的运行过程。 注意同一个程序执行两次,是两个进程。比如打开两个QQ,登陆的是不同人的QQ号。 并行与并发 无论是并行还是并发,在用户看来都是'同时'运行 ...
分类:
其他好文 时间:
2020-02-20 18:41:59
阅读次数:
67
基本概念 进程:进程是一个具有独立功能的程序关于某个数据集合的一次运行活动。进程是操作系统动态执行的基本单元。 线程:一个进程中包含若干线程,当然至少有一个线程,线程可以利用进程所拥有的资源。线程是独立运行和独立调度的基本单元。 协程:协程是一种用户态的轻量级线程。协程无需线程上下文切换的开销,也无 ...
分类:
编程语言 时间:
2020-02-18 23:21:33
阅读次数:
153
在Python中,可以通过多进程、多线程和多协程来实现多任务。 在多线程的实现过程中,为了避免出现资源竞争问题,可以使用互斥锁来使线程同步(按顺序)执行。 但是,其实Python的CPython(C语言实现的)解释器上有一把GIL锁,也就是说Python的程序是处于一个解释器锁的环境中的。 一、GI ...
分类:
编程语言 时间:
2020-02-18 20:52:01
阅读次数:
83
一、多线程爬虫 (一)程序、进程与线程: 程序:相当于一个应用。 进程:程序运行资源(内存资源)的最小分配单位,一个程序可以有多个进程。 线程:cpu最小的调度单位,必须依赖进程而存在。线程没有独立资源,所有线程共享该进程的全部资源。 线程的划分尺度比进程小。 (二)为什么多进程和多线程可以提高程序 ...
分类:
其他好文 时间:
2020-02-18 18:23:20
阅读次数:
58
爬虫用到的知识点 1,第一阶段:字符串,列表方法。。。 2,第二阶段:Mysql,MongoDB,多进程爬虫,多线程爬虫,正则表达式re 3,第三阶段:HTML,JS,Redis数据库。。。 ...
分类:
其他好文 时间:
2020-02-18 13:11:26
阅读次数:
53
多进程 __多个进程间无任何共享状态__ 进程间有时需要交换数据,进程间通讯(InterprocessCommunication, IPC) 创建进程 直接生成Process实例 派生子类生成实例 init函数:和threading一样,只要写此函数就要调用父类的init函数 run函数:实际执行函 ...
分类:
系统相关 时间:
2020-02-15 18:47:40
阅读次数:
74