安装:pip3 install requestspip3 install seleniumpip3 install bs4pip3 install pyquerypip3 install pymysqlpip3 install pymongopip3 install redispip3 instal ...
分类:
编程语言 时间:
2018-06-29 20:33:57
阅读次数:
153
今天早上看到一篇文章写的很好,软件测试工程师的地位在圈里的地位低下,甚至有些技术比较厉害的开发工程师觉得软件测试工程师没有存在的必要,而作为软件测试工程师的一员如何保持自己的技能和竞争力哪?下面简要介绍一下软件测试从低阶到高阶之路: 1.功能测试:功能测试是最基本的测试,保证可用性和正确性;编写测试 ...
分类:
其他好文 时间:
2018-06-29 14:17:33
阅读次数:
137
1. Beautiful Soup的简介 简单来说,Beautiful Soup是python的一个库,最主要的功能是从网页抓取数据。 2. Beautiful Soup 安装 pip install beautifulsoup4 3. 创建 Beautiful Soup 对象 from bs4 i ...
分类:
其他好文 时间:
2018-06-26 16:01:18
阅读次数:
169
Beautiful Soup是python的一个HTML或XML的解析库,我们可以用它来方便的从网页中提取数据,它拥有强大的API和多样的解析方式。 Beautiful Soup的三个特点: Beautiful Soup提供一些简单的方法和python式函数,用于浏览,搜索和修改解析树,它是一个工具 ...
分类:
编程语言 时间:
2018-06-23 20:53:24
阅读次数:
155
博主使用的是Mac系统,直接通过命令安装库: sudo easy_install beautifulsoup4 安装完成后,尝试包含库运行: from bs4 import BeautifulSoup 若没有报错,则说明库已正常安装完成。 开始 本文会通过这个网页http://reeoo.com来进 ...
分类:
其他好文 时间:
2018-06-23 19:05:29
阅读次数:
240
爬虫代码概述 一.数据存储 csv文件存储,为方便后继使用pandas进行分析,对于爬取的html文件使用BeautifulSoup进行解析 字段选择为 : 书名(titles) 作者/出版社(authors) 评分(nums) 评论数(peoples) 二.网页解析 html中书名(titles) ...
分类:
编程语言 时间:
2018-06-23 17:12:06
阅读次数:
257
#!/usr/bin/python # -*- coding:utf8 -*- import requests import re import os import time # from urllib import json from bs4 import BeautifulSoup from d... ...
分类:
编程语言 时间:
2018-06-22 19:58:00
阅读次数:
393
爬取网页: 用requeusts获取整个网页的HTML信息; 使用Beautiful Soup解析HTML信息 ...
分类:
编程语言 时间:
2018-06-20 21:36:19
阅读次数:
431
hackhttp模板:造福人类 发起get/post/ 发起http原始数据包 漏洞利用:更为快捷放放不安 ...
分类:
Web程序 时间:
2018-06-19 11:51:08
阅读次数:
600
一段代码,可以跑出所有文章的url # encoding: utf-8 import requests from bs4 import BeautifulSoup base_url = 'http://blog.jobbol session = requests.session() i=0 for ...
分类:
Web程序 时间:
2018-06-18 17:07:11
阅读次数:
192