爬虫 1.基础知识：网站基本原理，html,python,多进程/多线程/协程等（必学） 2.HTML基础、网络请求模块：requests(必学)，urllib(可以了解) 3.需要了解一些常见的反爬策略以及对应的解决方案：常见的有IP频率限制，User-Agent、Referer、Origen验证 ...
分类：
编程语言 时间：
2019-01-20 18:49:04
阅读次数：
180
Python协程深入理解 从语法上来看，协程和生成器类似，都是定义体中包含yield关键字的函数。yield在协程中的用法： 在协程中yield通常出现在表达式的右边，例如：datum = yield,可以产出值，也可以不产出--如果yield关键字后面没有表达式，那么生成器产出None. 协程可能 ...
分类：
编程语言 时间：
2019-01-20 11:57:36
阅读次数：
144
进程： 概念： 进程（Process）是计算机中的程序关于某数据集合上的一次运行活动，是系统进行资源分配和调度的基本单位，是操作系统结构的基础。在早期面向进程设计的计算机结构中，进程是程序的基本执行实体；在当代面向线程设计的计算机结构中，进程是线程的容器。程序是指令、数据及其组织形式的描述，进程是程 ...
分类：
编程语言 时间：
2019-01-19 12:20:53
阅读次数：
219
网络编程目录 1.网络编程基础 2.TCP与UDP协议 3.socket与 socketserver、黏包 4.线程与进程 5.线程锁 6.进程 7.协程与IO多路复用 8. 进程.线程.协程之间的区别? ...
分类：
其他好文 时间：
2019-01-17 21:21:31
阅读次数：
190
并发编程协程之Gevent Gevent官网文档地址：http://www.gevent.org/contents.html 基本概念 我们通常所说的协程Coroutine其实是corporate routine的缩写，直接翻译为协同的例程，一般我们都简称为协程。 在linux系统中，线程就是轻量级 ...
分类：
其他好文 时间：
2019-01-15 20:03:50
阅读次数：
250
<!--done--> asyncio模块 这是官网也非常推荐的一个实现高并发的一个模块，python也是在python 3.4中引入了协程的概念。 asyncio 是干什么的？ 异步网络操作 并发 协程 python3.0时代，标准库里的异步网络模块：select(非常底层) python3.0时 ...
分类：
其他好文 时间：
2019-01-15 20:03:39
阅读次数：
150
1、主协程先退出导致子协程没来得及调用 示例： 执行结果 ...
分类：
其他好文 时间：
2019-01-15 17:02:19
阅读次数：
294
线程的其他方法: Threading.current_thread() #当前线程对象 GetName() 获取线程名 Ident 获取线程id Threading.Enumerate() #当前正在运行的线程对象的一个列表 Threading.active_count() #当前正在运行的线程数量 ...
分类：
编程语言 时间：
2019-01-14 23:12:29
阅读次数：
261
OK 这一篇主要是协程的，还落下了点线程的方法，先说线程， 一. 线程池 线程池顾名思义就是跟是跟进程池一样的 到这里就差我们的线程池没有讲了，我们用一个新的模块给大家讲，早期的时候我们没有线程池，现在python提供了一个新的标准或者说内置的模块，这个模块里面提供了新的线程池和进程池，之前我们说的 ...
分类：
编程语言 时间：
2019-01-14 23:09:42
阅读次数：
212
1.协程 基于单线程来实现并发，即只用一个主线程（很明显可利用的cpu只有一个）情况下实现并发，为此我们需要先回顾下并发的本质：切换+保存状态 cpu正在运行一个任务，会在两种情况下切走去执行其他的任务（切换由操作系统强制控制），一种情况是该任务发生了阻塞，另外一种情况是该任务计算的时间过长或有一个 ...
分类：
编程语言 时间：
2019-01-14 22:00:17
阅读次数：
221
