爬虫框架:scrapy 阅读目录 一 介绍 二 安装 三 命令行工具 四 项目结构以及爬虫应用简介 五 Spiders 六 Selectors 七 Items 八 Item Pipeline 九 Dowloader Middeware 十 Spider Middleware 十一 爬取亚马逊商品信息 ...
分类:
其他好文 时间:
2018-01-22 16:10:59
阅读次数:
286
阅读目录 一 IO模型介绍 二 阻塞IO(blocking IO) 三 非阻塞IO(non-blocking IO) 四 多路复用IO(IO multiplexing) 五 异步IO(Asynchronous I/O) 六 IO模型比较分析 七 selectors模块 一 IO模型介绍 为了更好地了 ...
分类:
编程语言 时间:
2018-01-18 00:58:08
阅读次数:
212
#!/usr/bin/env python # -*-coding:utf-8-*- # Author:zh import socket import os import json import random import conf PATH = os.path.dirname(os.path.di ...
分类:
其他好文 时间:
2018-01-17 00:14:22
阅读次数:
176
阅读目录 一 介绍 二 安装 三 命令行工具 四 项目结构以及爬虫应用简介 五 Spiders 六 Selectors 七 Items 八 Item Pipeline 九 Dowloader Middeware 十 Spider Middleware 十一 爬取亚马逊商品信息 一 介绍 Scrapy ...
分类:
其他好文 时间:
2018-01-15 22:42:13
阅读次数:
405
Java NIO 由以下几个核心部分组成: Channels Buffers Selectors 虽然Java NIO 中除此之外还有很多类和组件,但是,Channel,Buffer 和 Selector 构成了核心的API。其它组件,如Pipe和FileLock,只不过是与三个核心组件共同使用的工 ...
分类:
其他好文 时间:
2017-12-31 22:28:51
阅读次数:
192
一、Selectors模块 它具有根据平台选出最佳的IO多路机制,比如在win的系统上他默认的是select模式而在linux上它默认的epoll,建议使用selectors。 常用共分为三种:select、poll、epoll 二、用法 selectors server 下面开始强行解释了。。。。 ...
分类:
其他好文 时间:
2017-12-19 15:28:00
阅读次数:
137
当抓取网页时,常见的任务是从HTML源码中提取数据。现有的一些库可以达到这个目的: BeautifulSoup lxml Scrapy 提取数据有自己的一套机制。它们被称作选择器(seletors),因为他们通过特定的 XPath 或者 CSS 表达式来“选择” HTML 文件中的某个部分。 构造选 ...
分类:
其他好文 时间:
2017-11-26 19:39:38
阅读次数:
187
给一个链接 http://www.exp99.com/jswz/f2e/1408696007_34.html iCheck 特色: 1、在不同浏览器(包括ie6+)和设备上都有相同的表现 — 包括 桌面和移动设备 2、支持触摸设备 — iOS、Android、BlackBerry、Windows P ...
分类:
其他好文 时间:
2017-11-17 18:31:12
阅读次数:
125
undertow,jetty和tomcat可以说是javaweb项目当下最火的三款服务器,tomcat是apache下的一款重量级的服务器,不用多说历史悠久,经得起实践的考验。然而:当下微服务兴起,spring boot ,spring cloud 越来越热的情况下,选择一款轻量级而性能优越的服务器 ...
分类:
其他好文 时间:
2017-11-04 22:20:44
阅读次数:
1236
1. 前言 为了处理除了两项不符合条件外的选择,需要用到jquery选择器的多个条件匹配来处理,然后整理了一下相关的与或非的条件及其组合。 作为笔记记录。 2. 代码 3. 效果 4. 参考 http://www.runoob.com/jquery/jquery-ref-selectors.html ...
分类:
Web程序 时间:
2017-10-21 19:05:24
阅读次数:
720