全面超越Appium，使用Airtest超快速开发App爬虫 想开发网页爬虫，发现被反爬了？想对 App 抓包，发现数据被加密了？不要担心，使用 Airtest 开发 App 爬虫，只要人眼能看到，你就能抓到，最快只需要2分钟，兼容 Unity3D、Cocos2dx-*、Android 原生 App ...
分类：
其他好文 时间：
2021-03-29 11:53:32
阅读次数：
0
用spyder运行正常，程序上传到服务器，添加计划任务，运行报错：ModuleNotFoundError: No module named 'selenium'，实际上已经安装了。 搜索一番，有人说程序前面加上： import sys import os curPath = os.path.absp ...
分类：
其他好文 时间：
2021-03-29 11:49:17
阅读次数：
0
python—简单数据抓取六（安装scrapy环境并创建爬虫项目、以顶点小说网为例利用scrapy进行爬取、scrapy相关的注意事项） 学习内容： 学习使用scrapy1、安装scrapy环境并创建爬虫项目2、以顶点小说网为例利用scrapy进行爬取3、scrapy相关的注意事项 1、安装scra ...
分类：
编程语言 时间：
2021-03-17 14:42:17
阅读次数：
0
基本开发环境： ·Python3.6 ·Pycharm 相关模块使用： import requests import time 目标网页分析： 选择一个影视栏目，F12或者鼠标右键检查，打开开发者工具，选择network，下滑网页 https://haokan.baidu.com/videoui/a ...
分类：
编程语言 时间：
2021-03-17 14:20:20
阅读次数：
0
# 图片爬取 import re import urllib import urllib.request def gethtml(url): page=urllib.request.urlopen(url) html=page.read() return html def getimg(html): ...
分类：
编程语言 时间：
2021-03-16 14:08:34
阅读次数：
0
安全术语 撞库：撞库攻击指的是黑客通过收集互联网上已泄露的用户账户信息，生成对应的字典表，再利用部分用户相同的注册习惯（即使用相同的用户名和密码），尝试登陆其它的网站或应用，以获取新的可利用账户信息。 爬虫：爬虫又称为网页蜘蛛，是一种按照既定规则，自动抓取网络上的指定信息的程序或脚本，可分为遍历爬取 ...
分类：
其他好文 时间：
2021-03-16 13:53:33
阅读次数：
0
python爬取网站表格：本文使用了BeautifulSoup和requests包解析地震网站公开数据，并了解网页html结构信息，最终获取最终想要的数据。 ...
分类：
编程语言 时间：
2021-03-15 11:05:34
阅读次数：
0
python\小脚本\selenium_base_file.py # -*- coding: utf-8 -*- """ Created on Wed Feb 28 19:40:07 2018 @author: zhoujunqing """ # -*- coding: utf-8 -*- """ ...
分类：
其他好文 时间：
2021-03-15 11:02:11
阅读次数：
0
selenium是自动化框架！！安装了pyCharm，软件自带了chrom浏览器，导入selenium库，开始我的学习之旅哈web页面中通过选择元素来操作页面，如何选择元素是重点！1、通过元素id来选择元素简单例子 from selenium import webdriver# 创建 WebDriv ...
分类：
其他好文 时间：
2021-03-10 13:38:58
阅读次数：
0
4.代码展示： - 爬虫文件： class WangyiSpider(RedisSpider): name = 'wangyi' #allowed_domains = ['www.xxxx.com'] start_urls = ['https://news.163.com'] def __init_ ...
分类：
其他好文 时间：
2021-03-10 13:00:28
阅读次数：
0
