在一个小项目中,需要用到京东的所有商品ID,因此就用c#写了个简单的爬虫。 在解析HTML中没有使用正则表达式，而是借助开源项目HtmlAgilityPack解析HTML。 一、下载网页HTML 首先我们写一个公共方法用来下载网页的HTML。 在写下载HTML方法之前，我们需要去查看京东网页请求头的 ...
1.解析html文件，创建DOM树 自上而下解析，遇到任何样式（link、style）和脚本（script）都会阻塞 1）css加载不会阻塞html文件的解析，但会阻塞dom的渲染 2）css加载会阻塞后面js语句的执行 3）js会阻塞html的解析和渲染 4）没有defer和async标签的scr ...
分类：
Web程序 时间：
2018-11-04 15:36:52
阅读次数：
149
html：给div设置值和获取值，会解析html标签 text：给div设置值和获取值，不会解析html标签 val：获取input里的值 代码如下 效果图 ...
分类：
Web程序 时间：
2018-10-31 23:29:21
阅读次数：
214
1、bs4 BeautifulSoup, 用来解析html数据，提供的接口非常的人性化， 简单 安装：pip install bs4 pip源，默认从国外源安装，我们指定为国内源安装，阿里源、豆瓣源 Ubuntu源， （1）指令配置源 pip install bs4 -i 源地址 （2）永久配置 p ...
分类：
其他好文 时间：
2018-10-31 13:51:25
阅读次数：
198
一次HTTP请求和响应的过程 域名解析 --> 发起TCP的3次握手 --> 建立TCP连接后发起http请求 --> 服务器响应http请求，浏览器得到html代码 --> 浏览器解析html代码，并请求html代码中的资源（如js、css、图片等） --> 浏览器对页面进行渲染呈现给用户 一次会 ...
分类：
Web程序 时间：
2018-10-21 00:58:19
阅读次数：
259
Appium-python-Client：用来连接appium server的库，可以实现移动端的自动化 selenium：用来驱动浏览器自动化的库，可以实现网页的自动化 Pyinstaller:将py文件打包成exe的库，只需要一条命令 bs4:解析html的库，一般和requests搭配，利用其 ...
分类：
编程语言 时间：
2018-10-08 11:22:58
阅读次数：
298
1.浏览器的渲染引擎工作原理： （1）解析HTML，生成DOM树。解析HTML文档，转换树中的html标签或js生成的标签到DOM节点，它被称为 -- 内容树。 （2）构建渲染树，解析Style，生成Style Rules，解析CSS（包括外部CSS文件和样式元素以及js生成的样式），根据CSS选择 ...
分类：
其他好文 时间：
2018-10-02 14:12:46
阅读次数：
233
lxml库 lxml是一个HTML/XML的解析器，主要的功能是如何解析和提取 HTML/XML数据。 基本使用： 1.我们可以利用他来解析HTML代码，并且在解析HTML代码的时候，如果HTML代码不规范，他会自动的进行补全。 2.从文件中读取html代码： 在上代码中，如果html代码不是很规范 ...
分类：
其他好文 时间：
2018-10-01 17:59:58
阅读次数：
180
【数据格式提要】 1.在服务器端Ajax是一门与语言无关的技术。在业务逻辑层使用何种服务器端语言都可以。 2.从服务器端接收数据的时候，那些数据必须以浏览器能够理解的格式来发送。服务器端的编程语言只能以如下三种格式返回数据： --XML --JSON --HTML 【解析HTML】 1.HTML由一 ...
分类：
Web程序 时间：
2018-10-01 12:52:44
阅读次数：
156
页面加载速度影响因素——前端性能 前端性能关键呈现路径所涉及的步骤： 1 . DOM：浏览器在解析HTML时，会以递增的方式为HTML标记生成一种名为文档对象模型（DOM）的树状模型， 该模型描述了网页中包含的内容 2 . CSSOM：浏览器收到所有CSS后，会对其中包含的标记和类生成一种名为CSS ...
分类：
其他好文 时间：
2018-09-21 00:33:25
阅读次数：
210
