一、需求分析 需求 ：通过输入关键字对肯德基餐厅信息进行爬取 分析 ： 1、如图所示，搜索肯德基网站的首页，会发现最下面的功能栏中有餐厅查询一栏，点击进入会出现图2中的页面，我们可以在搜索栏中输入想要查询信息的城市名称，即可出现该城市的KFC餐厅相关信息 2、比如说，我们输入北京进行搜素，该页面便会 ...
分类：
其他好文 时间：
2021-05-23 22:55:55
阅读次数：
0
有些浏览器，登录得时候需要用户名和密码，通常是basic认证或者digest认证。则需要用到requests包的HTTPBasicAuth。 from requests.auth import HTTPBasicAuth import requests from requests.auth impo ...
分类：
其他好文 时间：
2021-05-03 11:54:47
阅读次数：
0
有时候需要做个某些服务的状态监控，用钉钉机器人发通知挺方便的。可以用shell脚本配合crontab检测状态，检测到异常就调用python脚本发起告警。 python内容 此处用的python3，需要先安装requests模块。pip install requests -i https://mirr ...
分类：
编程语言 时间：
2021-04-30 12:35:08
阅读次数：
0
# #一、填写请求头 #二、配置程序延迟时间 #三、填写源IP文件 #四、经了解，该接口限制一分钟采集45个 # import requests import json import os from fake_useragent import UserAgent from xlwt import W ...
运行环境python3.7 #coding=utf-8 import requests import time import json import re import sqlite3 url=[] for i in open("AURL.txt"): url.append(i) yaoqing=u ...
分类：
其他好文 时间：
2021-04-27 14:10:35
阅读次数：
0
网上有很多教程安装requests,当我根据教程中进行安装时，出现了很多问题，在下方进行罗列 1.不要直接cmd进行pip install requests,多半都有错，很有可能安不到你对应的地方，此时应该找到python文件夹下的Script文件夹再进行cmd 2.就算直接找到了Script文件夹 ...
分类：
其他好文 时间：
2021-04-26 13:09:42
阅读次数：
0
最常用的get、post方法 1.get请求方法 带请求参数： import requests ''' URL Parameters 请求方式： URL参数 例如： 以get 方式请求http://httpbin.org/get?first_name=hello&last_name=word ''' ...
分类：
编程语言 时间：
2021-04-24 11:56:41
阅读次数：
0
上班想摸鱼？为了摸鱼方便，今天自己写了个爬取笔阁小说的程序。好吧，其实就是找个目的学习python，分享一下。 1. 首先导入相关的模块 import os import requests from bs4 import BeautifulSoup 2. 向网站发送请求并获取网站数据 网站链接最后的 ...
分类：
编程语言 时间：
2021-04-22 16:03:13
阅读次数：
0
get请求的参数都在url里，post的请求相对于get请求多了个body部分 常见的 post 提交数据类型有四种： 1.第一种：application/json： 这是最常见的 json 格式，如{"input1":"xxx","input2":"ooo","remember":false} 2 ...
分类：
其他好文 时间：
2021-04-22 15:43:16
阅读次数：
0
#!/usr/bin/env python # -*- coding:utf-8 _*- """ @author:zhoutao @file: 金山 V8 终端安全系统 默认弱口令漏洞.py @time: 2021/04/20 @function: """ import requests impor ...
分类：
其他好文 时间：
2021-04-22 15:22:34
阅读次数：
0
