1. 网址:http://maoyan.com/board/4? 2. 代码: 1 import json 2 from multiprocessing import Pool 3 import requests 4 from requests.exceptions import RequestEx ...
分类:
编程语言 时间:
2017-10-12 15:38:00
阅读次数:
234
spider.py 1 # -*- coding:utf-8 -*- 2 import requests 3 import re 4 import json 5 import codecs 6 from requests.exceptions import RequestException 7 fr ...
分类:
其他好文 时间:
2017-10-10 13:26:04
阅读次数:
185
0×01 前言 前两天在百家号上看到一篇名为《反击爬虫,前端工程师的脑洞可以有多大?》的文章,文章从多方面结合实际情况列举了包括猫眼电影、美团、去哪儿等大型电商网站的反爬虫机制。的确,如文章所说,对于一张网页,我们往往希望它是结构良好,内容清晰的,这样搜索引擎才能准确地认知它;而反过来,又有一些情景 ...
分类:
Web程序 时间:
2017-07-28 09:52:07
阅读次数:
313
1 小程序特点: 适合做成小程序的eg:饿了么,猫眼电影,滴滴打车 不适合做成小程序的:知乎,斗鱼直播,阴阳师 2 小程序对开发者的影响 短期内将提升市场对JavaScript程序员的需求量 小程序是0基础开发者很好的入门平台 小程序不可以使用现在已经存在的JavaScript组件库 开发环境和开发 ...
分类:
其他好文 时间:
2017-07-12 10:10:05
阅读次数:
157
一.概述 今天主要来分享个自己定义viewpagerindicator。效果主要是仿 猫眼电影 顶部的栏目切换。也就是我们常说的indicator,难度简单,为了让滑动时效果更炫酷,我在滑动到左边第一个item或者最右边的item时,加入了滑动到边缘位置后,回弹然后复位的效果(事实上也是非常easy ...
分类:
其他好文 时间:
2017-07-09 12:17:51
阅读次数:
251
Requests是一个很方便的python网络编程库,用官方的话是“非转基因,可以安全食用”。里面封装了很多的方法,避免了urllib/urllib2的繁琐。 这一节使用requests库对猫眼电影的TOP100榜进行抓取。 1 获得页面。 首先确定要爬取的url为http://maoyan.com ...
分类:
其他好文 时间:
2017-06-09 00:47:26
阅读次数:
354
1 #requests+正则表达式提取猫眼电影top100 2 import requests 3 import re 4 import json 5 from requests.exceptions import RequestException 6 from multiprocessing im... ...
分类:
其他好文 时间:
2017-05-20 22:41:34
阅读次数:
428
AxureShare地址:http://lt548g.axshare.com 来自为知笔记(Wiz) ...
分类:
其他好文 时间:
2017-05-14 20:35:31
阅读次数:
169
import jsonimport reimport requestsfrom bs4 import BeautifulSoupfrom requests import RequestExceptionfrom multiprocessing import Pooldef get_one_page( ...
分类:
其他好文 时间:
2017-05-13 20:01:51
阅读次数:
332