异步网络模块之aiohhtp的使用(一) 平时我们也许用的更多的是request模块，或者是requets_hml模块，但是他们都属于阻塞类型的不支持异步，速度很难提高，于是后来出现了异步的grequests,开始了异步网络请求，速度得到了大大的提示，但是今天我们要说的另外的一个比较火的异步网络模块 ...
分类：
其他好文 时间：
2018-06-30 22:59:02
阅读次数：
496
Java中的BIO、NIO、AIO-3java 这一篇是代码篇，敲代码有助于理解记忆这些抽象的东西：参考资料：http://www.blogjava.net/killme2008/archive/2012/09/17/295743.html Java AIO初探(异步网络IO)https://www... ...
分类：
编程语言 时间：
2018-06-26 00:48:20
阅读次数：
222
最近想系统学习并使用一下boost的asio异步网络库，所以需要编译boost库使用，下面简单介绍如何编译。 ...
分类：
其他好文 时间：
2018-06-04 11:30:59
阅读次数：
504
抓包：charles Fiddler HTTP请求处理，urllib、requests 专门获得网络连接的库 Scrapy框架:(Scrapy，Pyspider) 高定制性高性能（异步网络框架twisted），所以数据下载速度非常快，提供了数据存储、数据下载、提取规则等组件 爬虫使用场景：通用爬虫、 ...
分类：
其他好文 时间：
2018-05-29 01:39:25
阅读次数：
133
1.介绍 Scrapy，Python开发的一个快速、高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试。Scrapy使用了Twisted异步网络库来处理网络通讯，整体架构大致如下： Scrapy主要包括了以下组件： ...
分类：
其他好文 时间：
2018-05-27 20:28:20
阅读次数：
201
大型分布式网站： 1 增加缓存，减少磁盘访问次数。给存放的数据设置索引，通过寻址索引来加快和减少磁盘的访问量。 2 web前端调优：减少网络交互的次数（多次请求合并）。 减少网络传输数据量的大小（压缩） 尽量减少编码（尽量提前将字符转化为字节，或者减少从字符到字节的转换过程） 使用浏览器缓存 减少c ...
分类：
Web程序 时间：
2018-04-29 22:10:00
阅读次数：
225
1 // 2 function loadXMLDoc() { 3 function success(text) { 4 var textarea = document.getElementById('myid'); 5 textarea.value = text; 6 } 7 function fa... ...
分类：
Web程序 时间：
2018-03-07 10:31:05
阅读次数：
237
scrapy是一个非常好用的爬虫框架，它是基于Twisted开发的，Twisted又是一个异步网络框架，既然它是异步的，那么执行起来肯定会很快，所以scrapy的执行速度也不会慢的！ 如果你还没没有学过scrapy的话，那么我建议你先去学习一下，再来看这个小案例，毕竟这是基于scrapy来实现的！网 ...
分类：
其他好文 时间：
2018-03-02 14:50:48
阅读次数：
171
简短介绍 asyncio是遵循Python标准库的一个异步 I/O框架．在这篇文章里，我将介绍 uvloop: 可以完整替代asyncio事件循环．uvloop是用Cython写的，基于 libuv. uvloop 使得 asyncio 更快. 实际上，比nodejs，gevent，以及其他任何Py ...
分类：
编程语言 时间：
2018-02-22 21:34:43
阅读次数：
1055
Prepare 本文将使用一个NuGet公开的组件技术来实现一个局域网聊天程序，利用组件提供的高性能异步网络机制实现，免去了手动编写底层的困扰，易于二次开发，扩展自己的功能。 在Visual Studio 中的NuGet管理器中可以下载安装，也可以直接在NuGet控制台输入下面的指令安装： NuGe ...
