1.打开F12，切换到console 2.xpath定位，输入：$x("your_xpath_str") 3.css定位，输入：$$("your_css_str") 4.id，document.getElementById("xx") 5.class，document.getElementByCla ...
分类：
其他好文 时间：
2021-06-02 14:23:20
阅读次数：
0
在日常撸代码时，使用到最多的调试工具就是chrom。但是小伙伴们应该极少关注请求体的不同。 1、在Heaers中设置Content-Type：application.json，前端搭配了qs.stringify()。此种方法的弊端是通知后端是json格式的数据，却不可以用json.parse解析；还 ...
分类：
其他好文 时间：
2021-05-24 14:56:53
阅读次数：
0
selenium是自动化框架！！安装了pyCharm，软件自带了chrom浏览器，导入selenium库，开始我的学习之旅哈web页面中通过选择元素来操作页面，如何选择元素是重点！1、通过元素id来选择元素简单例子 from selenium import webdriver# 创建 WebDriv ...
分类：
其他好文 时间：
2021-03-10 13:38:58
阅读次数：
0
问题 vscode使用chrome调试报错"无法访问您的文件"或者"localhost 拒绝了我们的连接请求"。 解决 ctrl+p 搜索launch.json文件 改为： { "version": "0.2.0", "configurations": [ { "name": "使用本机 Chrom ...
分类：
其他好文 时间：
2021-03-10 13:21:22
阅读次数：
0
在上一篇中我们贴出来一些代码，用来验证所有环境是不是完全搞定，只要能启动浏览器打开网址就成功了。这一步我们开始一个最简单的场景 挨着test01.py,新建test02.py，敲入如下代码 from selenium import webdriver driver = webdriver.Chrom ...
分类：
编程语言 时间：
2021-01-02 11:43:17
阅读次数：
0
端午出去玩的时候，老板打电话说公司网站的 HTTPS 过期了，访问不了（见下图），要我立马升级一下。可惜我当时没带电脑，无能为力，可把老板急坏了。 没办法，急就先急着，只能等我有电脑了才能搞。点击高级，可以看到以下信息： z.xxxx.cn 通常会使用加密技术来保护您的信息。Google Chrom ...
分类：
Web程序 时间：
2020-06-30 10:57:54
阅读次数：
72
准备工作 安装selenium 准备对应版本的geckdriver.exe文件。 http://chromedriver.storage.googleapis.com/index.html 默认都是使用chorme浏览器，版本对应链接如上 chromedriver配置环境变量 如果没有配置chrom ...
分类：
其他好文 时间：
2020-06-26 13:07:19
阅读次数：
50
基于golang的爬虫实战 前言 爬虫本来是python的强项，前期研究过scrapy，也写过一些简单的爬虫小程序，但是后来突然对golang产生兴趣，决定写写爬虫练练手。由于本人golang萌新，有错误之处，欢迎指正。 大致思路 由于现在动态页面比较多，因此考虑通过WebDriver驱动Chrom ...
分类：
其他好文 时间：
2020-06-22 12:59:43
阅读次数：
39
使用chrome打开weibo.com会出现以下界面的弹出框： 这东西不属于页面alert弹框，而是属于浏览器的设置项。 要关掉它，需要对浏览器进行属于配置。具体见下面脚本： from selenium import webdriver import time options = webdriver ...
分类：
编程语言 时间：
2020-05-20 12:16:05
阅读次数：
162
在爬虫已启动，就打开一个 chrom 浏览器，以后都用这一个浏览器来爬数据 1 在爬虫中创建 bro 对象 在 middlewares.py 中定义一个 class: spider中的代码： 下载中间件使用 把 selenium 集成到 scrapy 中主要改变的就是这两处地方 以上的在 scrap ...
分类：
其他好文 时间：
2020-04-12 20:51:32
阅读次数：
71
