Puppeteer是Chrome开发团队2017年发布的一个 Node.js包,提供了一组用来操纵Chrome的API,通俗来说就是一个Headless Chrome浏览器,这Headless Chrome也可以配置成有UI的 。利用Puppeteer可以做到爬取页面数据,页面截屏或者生成PDF文件,前端自动化测试(模拟输入/点击/键盘行为)以及捕获站点的时间线,分析网站性能问题。
分类:
其他好文 时间:
2020-08-13 22:24:13
阅读次数:
88
1、多表单(或者说框架)切换 什么是表单:就是网页标签名为frame或iframe 的元素,表单引用了其他页面的链接,真正的页面数据没有出现在源码中,但是 在浏览器中可以看见,与浏览器的多个窗口类似 为什么需要切换:在web应用会遇到frame/iframe表单嵌套的应用,selenium的WebD ...
分类:
其他好文 时间:
2020-08-10 09:28:57
阅读次数:
59
大部分的网站展示的数据都进行了分页操作,那么将所有页码对应的页面数据进行爬取就是爬虫中的全站数据爬取。 基于scrapy如何进行全站数据的爬取? 使用request方法,给callback传参(函数), 函数解析请求回来的数据,实现全站数据爬取 爬虫文件 import scrapy from lea ...
分类:
其他好文 时间:
2020-07-27 17:41:42
阅读次数:
69
用户体验一直是前端开发需要考虑的重要部分,在数据请求时常见到锁屏的loading动画,而现在越来越多的产品倾向于使用Skeleton Screen Loading(骨架屏)替代,以优化用户体验 Skeleton Screen Skeleton Screen(骨架屏)就是在页面数据尚未加载前先给用户展 ...
分类:
Web程序 时间:
2020-07-16 18:29:18
阅读次数:
72
点击下载:ReactNative+TypeScript仿喜马拉雅开发App完整无密 章节目录: 第1章 课程介绍 本课程主要介绍为什么要使用React Native + TypeScript开发应用。 1-1 课程导学 试看 第2章 ES6、React、React Native基础知识串讲 本章会讲 ...
分类:
移动开发 时间:
2020-07-16 12:07:07
阅读次数:
164
一.httpclient 来自Apache,可以通过Java代码发起HTTP请求 下载:http://hc.apache.org/downloads.cgi HttpClient是基于HttpCore的HTTP / 1.1兼容HTTP代理实现。它还为客户端身份验证,HTTP状态管理和HTTP连接管理 ...
分类:
Web程序 时间:
2020-07-11 19:24:14
阅读次数:
77
Python网络爬虫第三弹《爬取get请求的页面数据》 一.urllib库 urllib是Python自带的一个用于爬虫的库,其主要作用就是可以通过代码模拟浏览器发送请求。其常被用到的子模块在Python3中的为urllib.request和urllib.parse,在Python2中是urllib ...
分类:
编程语言 时间:
2020-07-11 17:38:07
阅读次数:
76
(1)QueryString 传递一个或多个安全性要求不高或是结构简单的数值。但是对于传递数组或对象的话,就不能用这个方法了 (2)session(viewstate) 简单,但易丢失 作用于用户个人,过量的存储会导致服务器内存资源的耗尽。 (3)application 对象的作用范围是整个全局,也 ...
分类:
Web程序 时间:
2020-07-04 22:33:36
阅读次数:
60
2. Next.js服务器端渲染 学习目标 了解Next.js的作用 掌握Next.js中的路由 掌握Next.js中布局组件的创建 掌握Next.js中的静态文件服务 掌握Next.js中获取页面数据的方法 掌握Next.js中组件样式的书写 使用Next.js完成豆瓣电影案例 能够自定义头部元素 ...
分类:
Web程序 时间:
2020-07-04 20:31:31
阅读次数:
236
1.Servlet页面代码 /* 实现jsp页面和sevlet页面的信息交互 */ @WebServlet(urlPatterns = "/aa") public class JspService extends HttpServlet { protected void doPost(HttpSer ...
分类:
Web程序 时间:
2020-06-28 13:10:36
阅读次数:
81