1 你为什么离开上家公司？ 2 自己最擅长的领用和技能是什么？ 3 目前为止你解决过哪些让你自己感觉有价值的问题？ 4 python基础问题？ 5 最熟悉的框架，如django？ 6 讲讲你对进程、线程、协程理解？ 7 对mysql的理解，常用查询，索引的理解，联合查询，分类的使用，设计和优化？ 8 ...
分类：
编程语言 时间：
2018-05-12 20:30:50
阅读次数：
153
前戏： 在进行自定义线程池前，先了解下Queue队列 队列中可以存放基础数据类型，也可以存放类，对象等特殊数据类型 线程池应该具备的功能： 简单版本（Low）： ...
分类：
编程语言 时间：
2018-05-11 00:48:54
阅读次数：
184
'''爬虫的构成下载器： 抓取页面 urllib equests selenium + webdriver解析器： 解释并提取页面元素 BeautifulSoup4 PyQuery Xpath Regular Expression调度器：协调完成全部抓取任务 进程 线程 协程 分布式抓取处理器： 数 ...
分类：
其他好文 时间：
2018-05-09 12:17:19
阅读次数：
154
引子 二：第一种情况的切换。在任务一遇到io情况下，切到任务二去执行，这样就可以利用任务一阻塞的时间完成任务二的计算，效率的提升就在于此。 yield并不能实现遇到io切换 对于单线程下，我们不可避免程序中出现io操作，但如果我们能在自己的程序中（即用户程序级别，而非操作系统级别）控制单线程下的多个 ...
分类：
其他好文 时间：
2018-05-09 10:51:54
阅读次数：
163
进程线程的区别在进程，线程，协程的区别 linux或者unix有fork()函数，但是不支持win系统。 multiprocessing multiprocessing模块是跨平台版本的多进程模块。支持win系统,用法如下： *该py文件是通过cmd窗口执行，不然执行不了多进程 创建子进程时，只需要 ...
分类：
编程语言 时间：
2018-05-08 19:28:05
阅读次数：
156
协程，又称为微线程，可以理解成可切换的函数，或生成器，协程中始终在单线程中执行，因此没有资源冲突问题，不需要锁机制。以下以菲波那切数列为例，加上自己的一些理解，稍微聊一下这个东西。 斐波那契数列的普通实现 一般的函数只能有一个返回值，return，且return后程序不再执行。如下： 斐波那契数列y ...
分类：
其他好文 时间：
2018-05-08 14:32:39
阅读次数：
163
一.基础部分 1 2 3 二.函数 1 2 3 三.模块 常用到的模块有哪些? 常用的正则表达式 查找某一路径下所有的文件 创建删除文件 模块安装方式 四.面向对象 1 2 3 五.网络编程 OSI 7层协议 三次握手、四次挥手 TCP和UDP 六.并发编程 进程、线程、协程区别 GIL锁 进程池线 ...
分类：
其他好文 时间：
2018-05-07 19:35:19
阅读次数：
196
协程，又称微线程，纤程。英文名Coroutine。 协程的概念很早就提出来了，但直到最近几年才在某些语言（如Lua）中得到广泛应用。 子程序，或者称为函数，在所有语言中都是层级调用，比如A调用B，B在执行过程中又调用了C，C执行完毕返回，B执行完毕返回，最后是A执行完毕。 所以子程序调用是通过栈实现 ...
分类：
编程语言 时间：
2018-05-06 16:19:00
阅读次数：
193
一、 异步与回调机制 问题： 1、任务的返回值不能得到及时的处理，必须等到所有任务都运行完毕才能统一进行处理 2、解析的过程是串行执行的,如果解析一次需要花费2s,解析9次则需要花费18s 解决一： （线程实现异步，回调解析结果） 解决二： （进程实现异步，回调解析结果） 二、线程queue 三、线 ...
分类：
编程语言 时间：
2018-05-06 12:18:13
阅读次数：
215
''' GIL：全局解释锁 因为有GIL，所以，同一时刻，只有一个线程被cpu执行 处理方法：多进程+协程 任务种类：IO密集型 计算密集型 对于IO密集型的任务，Python的多线程时有意义的 可以采用多进程+协程 对计算密集型的任务，Python的多线程就不推荐，Python就不适用了 ''' ... ...
分类：
其他好文 时间：
2018-05-04 15:21:21
阅读次数：
161
