对象的种类 Beautiful Soup将复杂HTML文档转换成一个复杂的树形结构,每个节点都是Python对象,所有对象可以归纳为4种: Tag , NavigableString , BeautifulSoup , Comment 。 Tag Tag对象与XML或者HTML原生文档中的tag相同 ...
分类：
其他好文 时间：
2017-06-16 10:17:34
阅读次数：
228
1.celery的任务调度 2.celery如何进行负载均衡设计 celery有send_task方式去做任务调度，因此，负载均衡的话，可以采用自己的算法去做任务分配，可参考：http://blog.csdn.net/vintage_1/article/details/47664187 ...
分类：
其他好文 时间：
2017-06-16 00:53:33
阅读次数：
303
# coding:utf-8 import requests from bs4 import BeautifulSoup quesNumStr = str(input("请输入搜索关键字：")) url = 'https://www.zhihu.com/search?type=content&q='... ...
分类：
编程语言 时间：
2017-06-13 23:47:35
阅读次数：
953
1 import requests 2 from bs4 import BeautifulSoup 3 import bs4 4 5 #爬取定向网页的内容 6 def getHTMLText(url): 7 try: 8 r = requests.get(url, timeout = 30) 9 r... ...
分类：
Web程序 时间：
2017-06-13 12:52:31
阅读次数：
177
先去下载beautifulsoup的安装包https://www.crummy.com/software/BeautifulSoup/bs4/download/4.0/ 下载完之后解压 然后进包里面，里面有一个setup.py文件，执行它 然后就大功告成了，安装完之后我们就可以去爬虫了 ...
分类：
系统相关 时间：
2017-06-11 12:06:17
阅读次数：
176
#!python
#coding:utf-8
#python实现百度搜索关键字，并依次用浏览器打开前五个搜索结果
##
##BeautifulSoup是一个模块，用于从HTML页面中提取信息（用于这个目的时，它比正则表达式好很多）。BeautifulSoup模块的名称是bs4（表示BeautifulSoup，第4版）。要安装它，需要在命令..
分类：
编程语言 时间：
2017-06-09 09:53:06
阅读次数：
181
案例一 抓取对象： 新浪国内新闻（http://news.sina.com.cn/china/），该列表中的标题名称、时间、链接。 完整代码： from bs4 import BeautifulSoup import requests url = 'http://news.sina.com.cn/c ...
分类：
编程语言 时间：
2017-06-08 01:20:35
阅读次数：
2687
import requests from bs4 import BeautifulSoup import lxml import re import time import random import pymysql.cursors connection = pymysql.connect(host... ...
分类：
其他好文 时间：
2017-06-06 10:53:28
阅读次数：
239
import requests from bs4 import BeautifulSoup import pandas as pd import gevent from gevent import monkey;monkey.patch_all() import time import re imp... ...
分类：
其他好文 时间：
2017-06-05 15:51:56
阅读次数：
294
import lxml from bs4 import BeautifulSoup import time from selenium import webdriver import re driver = webdriver.PhantomJS() driver.set_window_size(1... ...
分类：
其他好文 时间：
2017-06-04 19:52:51
阅读次数：
334
