1.简介 按宏哥计划，本文继续介绍WebDriver关于元素定位大法，这篇介绍By ClassName。看到ID，NAME这些方法的讲解，小伙伴们和童鞋们应该知道，要做好Web自动化测试，最好是需要了解一些前端的基本知识。有了前端知识，做元素定位会很轻松，同样写网络爬虫也很有帮助，话题扯远了，回到S ...
分类：
编程语言 时间：
2021-07-28 21:35:15
阅读次数：
0
简介： 网络爬虫（又被称为网页蜘蛛)，网络机器人，是一种按照一定的规则，自动地抓信息的程序或者脚本。假设互联网是一张很大的蜘蛛网，每个页面之间都通过超链接这根线相互连接，那么我们的爬虫小程序就能够通过这些线不断的搜寻到新的网页。 Python作为一种代表简单主义思想的解释型、面向对象、功能强大的高级 ...
分类：
编程语言 时间：
2021-06-22 18:34:26
阅读次数：
0
选题的背景为什么要选择此选题？要达到的数据分析的预期目标是什么？ 小说是文化的一种载体,在古今中外的历史中都占据着重要的地位。人蒙对小说的需求也并不相同，如何在大量的小说里选取自己喜欢的小说，成为了问题，基于Python的数据爬虫技术是目前使用最广泛的方法之一，它能够以最快捷的方式展示用户体验数据， ...
分类：
编程语言 时间：
2021-06-20 17:51:57
阅读次数：
0
一.选题背景： 为什么选此题：如今，现代人买书大多都会选择线上购买，然而比较出名的购书网站当当网，在你要搜索想购买的书时，根据输入关键字搜索出来的书本种类繁多，眼花缭乱，对于有些原则困难症的人来说就很难受，不知如何让下手。 预期目标：希望通过我设计的爬取当当网的爬虫代码，捕获出来的书名，价格，出版社 ...
分类：
编程语言 时间：
2021-06-20 17:39:23
阅读次数：
0
网络爬虫（又称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。 ...
分类：
编程语言 时间：
2021-06-16 17:38:24
阅读次数：
0
? Python作为一种编程语言近年来越来越受欢迎，它为什么这么火？ 其中一个重要原因就是因为Python的库丰富——Python语言提供超过15万个第三方库，Python库之间广泛联系、逐层封装。几乎覆盖信息技术所有领域，下面简单介绍下数据分析与可视化、网络爬虫、自动化、WEB开发、机器学习常用的 ...
分类：
编程语言 时间：
2021-06-02 16:28:33
阅读次数：
0
一. 安装： 1. 安装py3，使用Homebrew： ruby -e "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install)" brew install python3 2. 安装请求库，Pi ...
分类：
编程语言 时间：
2021-05-24 04:50:49
阅读次数：
0
爬取的数据一般需要提交给数据库，这里就介绍了三个主流数据库的连接(mysql,redis,mongodb),如果你的数据库服务器都放在liunx系统上首先要修改一下配置文件将bind 127.0.0.1修改为bind 0.0.0.0这样才能访问数据库。并且需要查看linux防火墙设置。如果开启要将其 ...
分类：
数据库 时间：
2021-04-10 13:21:40
阅读次数：
0
1. 本节目标 我们的主要目标是利用代理爬取微信公众号的文章，提取正文、发表日期、公众号等内容，爬取来源是搜狗微信，其链接为 http://weixin.sogou.com/，然后把爬取结果保存到 MySQL 数据库。 2. 准备工作 首先需要准备并正常运行前文中所介绍的代理池。这里需要用的 Pyt ...
分类：
微信 时间：
2021-04-07 11:15:09
阅读次数：
0
### Python网络爬虫之requests模块 ###### 什么是requests模块 ? request模块是python中原生的基于网络请求的模块，其主要作用是用来模拟浏览器发起请求。功能强大，用法简洁高效。在爬虫领域中占着半壁江山的地位。 ###### 为什么要使用request模块 ? ...
分类：
编程语言 时间：
2021-03-31 12:17:39
阅读次数：
0
