菜鸟一个，以前没学过爬虫，今天恰好在浏览链家，想对长沙的价格有一个了解，所以用go的一个包goquery学习了一下怎么爬虫。 goquery包的基本使用可以参考链接：https://www.cnblogs.com/diegodu/p/5761961.html 对于爬虫，总体思路是： 1、明确URL( ...
分类：
其他好文 时间：
2020-04-19 18:16:57
阅读次数：
67
python信息： Python 3.7.4 (tags/v3.7.4:e09359112e, Jul 8 2019, 20:34:20) [MSC v.1916 64 bit (AMD64)] on win32 学习爬虫一段时间，复习并总结一下，方便自己以后查询、使用。 目录： 0.准备工作 1. ...
分类：
编程语言 时间：
2020-03-14 17:06:01
阅读次数：
67
自2020年一月份以来，新冠病毒的爆发与治疗让我们每个人都不太舒服 虽然我们普通人能做的地方并不多，并不能像医护人员一样冲锋陷阵，但是我们只要听从命令与指挥，不给国家添乱，我们就已经为国家贡献出了属于自己的力量。 加油吧中国！ 好了，言归正传，经过简单的爬虫学习，就想编写一个实时系统来查询确诊数据， ...
分类：
其他好文 时间：
2020-02-22 09:30:21
阅读次数：
108
爬虫学习 request的几个常用的方法 1. requests.get() 获取HTML网页的主要方法，对应HTTP的GET 2. requests.post() 向HTML网页提交POST请求的方法，对应HTTP的POST get方法需要接受一个参数URL，构造一个向目标服务器发送请求的requ ...
分类：
其他好文 时间：
2020-02-04 23:56:40
阅读次数：
132
1，下载curl：https://blog.csdn.net/weixin_42139662/article/details/88037763 请求头参数：https://blog.csdn.net/xiaochengyihe/article/details/80910913 （讲的比较详细） 查看 ...
分类：
编程语言 时间：
2020-02-04 23:35:31
阅读次数：
106
（一）Scrapy库概述 1，安装：pip install scrapy失败； 运行D:\Python\Python36\python.exe -m pip install --upgrade pip命令升级pip命令失败； 修改Python36文件的权限：https://www.cnblogs.c ...
分类：
编程语言 时间：
2020-02-03 00:02:03
阅读次数：
144
今天主要完成了pyqt库及相应工具的安装，以及简单的实现了界面功能。 开发工具IDE选择pycharm,因为之前就进行过python爬虫学习，所以IDE早就以及安装配置好了。 还有一点需要提的就是pyqt提供一个可视化工具叫QTDesigner,就像我们之前做过的C#一样，直接拖动控件完成界面布局就 ...
分类：
其他好文 时间：
2020-02-01 20:57:05
阅读次数：
77
（一）使用Beautiful Soup库 1，安装Beautiful Soup库：pip install beautifulsoup4 2，简单使用： import requests; from _socket import timeout from bs4 import BeautifulSoup ...
分类：
编程语言 时间：
2020-01-31 00:49:17
阅读次数：
85
大二学生，python小白，边学爬虫边学习python基础 使用教材：《python3网络爬虫开发实战》——崔庆才 首先贴出代码： import requests from requests.exceptions import RequestException import re import js ...
分类：
其他好文 时间：
2020-01-30 21:09:32
阅读次数：
172
# 本程序为爬虫学习代码，成功爬取了漫微网站上的全部图片内容 import re import os import requests def getHTMLText(url): try: r=requests.get(url) r.raise_for_status() r.encoding=r.ap ...
分类：
编程语言 时间：
2020-01-29 16:22:10
阅读次数：
107
