前言：python由于GIL（全局锁）的存在，不能发挥多核的优势，其性能一直饱受诟病。然而在IO密集型的网络编程里，异步处理比同步处理能提升成百上千倍的效率，弥补了python性能方面的短板，如最新的微服务框架japronto，resquests per second可达百万级。 python还有一 ...
分类：
编程语言 时间：
2018-06-12 18:31:52
阅读次数：
381
阶段大纲： 一.爬虫 1.基本操作 —登录任意网站（伪造浏览器的任何行为） 2.性能相关 —并发方案： —异步IO:gevent/Twisted/asyncio/aiohttp —自定义异步IO 模块 —IO多路复用：select 3.Scrapy框架 介绍：异步IO：Twisted —基于scra ...
分类：
其他好文 时间：
2018-06-07 22:54:22
阅读次数：
202
#!/usr/bin/env python # encoding: utf-8 import asyncio from requests_html import HTMLSession import time script = """ () => { return { width: document... ...
分类：
Web程序 时间：
2018-05-31 19:19:09
阅读次数：
1137
大家好，并发编程 进入第十章。好了，今天的内容其实还挺多的，我准备了三天，到今天才整理完毕。希望大家看完，有所收获的，能给小明一个赞。这就是对小明最大的鼓励了。为了更好地衔接这一节，我们先来回顾一下上一节的内容。 上一节「」，我们首先介绍了，如何创建一个协程对象.主要有两种方法 通过async关键字 ...
分类：
编程语言 时间：
2018-05-31 02:52:45
阅读次数：
325
大家好，并发编程 进入第九篇。 通过前两节的铺垫（关于协程的使用），今天我们终于可以来介绍我们整个系列的重点 -- asyncio。 asyncio是Python 3.4版本引入的标准库，直接内置了对异步IO的支持。 有些同学，可能很疑惑，既然有了以生成器为基础的协程，我们直接使用yield 和 y ...
分类：
编程语言 时间：
2018-05-27 12:03:20
阅读次数：
197
直接运行，拿走不送import requests as req
from bs4 import BeautifulSoup
import lxml
import re
import os
import aiohttp
import asyncio
u="D:/test"
分类：
其他好文 时间：
2018-05-24 13:12:01
阅读次数：
140
https://www.jianshu.com/p/b5e347b3a17c python asyncio 网络模型有很多中，为了实现高并发也有很多方案，多线程，多进程。无论多线程和多进程，IO的调度更多取决于系统，而协程的方式，调度来自用户，用户可以在函数中yield一个状态。使用协程可以实现高效 ...
分类：
编程语言 时间：
2018-05-13 23:04:22
阅读次数：
285
#!/usr/bin/env python # -*- coding: utf-8 -*- __author__ = "Daniel Altiparmak (sixfinger78@gmail.com)" __copyright__ = "Copyright (C) 2015 Daniel Alti... ...
分类：
Web程序 时间：
2018-05-11 20:03:20
阅读次数：
261
最近准备在一个老Django项目上启用Channels，Channels于今年2月2日发布2.0版本，这个版本包含很多不向前兼容的特性，为了新特性调研的需要，也为了方便社区，我新版本的What's New摘要地汉化一下。 一、依赖要求：因为对Py3标准库asyncio的依赖，Channels必须3. ...
分类：
其他好文 时间：
2018-05-07 22:45:41
阅读次数：
205
朋友发的，之前在网上一直没找着，先记着 #!/usr/bin/env python import asyncio import websockets import json async def test_ws_quote(): async with websockets.connect('ws://... ...
分类：
编程语言 时间：
2018-05-01 00:36:38
阅读次数：
482
