scrapy框架简介个基础应用 简介 一.什么是Scrapy？ Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架，非常出名，非常强悍。 所谓的框架就是一个已经被集成了各种功能（高性能异步下载，队列，分布式，解析，持久化等）的具有很强通用性的项目模板。 对于框架的学习，重点是要学习其 ...
分类：
其他好文 时间：
2019-01-10 16:26:42
阅读次数：
146
C#实现之(自动更新) 做开发的人，尤其是做客户端(C/S)系统开发的人都会遇到一个头疼的问题，就是软件的自动更新；系统发布后怎样自动的更新程序，在下有幸开发过一个自动更新程序，更新程序与任何宿主程序是完全独立的；只要在主程序里面启动更新程序就行了；更新程序也是一个可执行文件，在启动的时候可以设置是 ...
一，介绍 Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架，非常出名，非常强悍。所谓的框架就是一个已经被集成了各种功能（高性能异步下载，队列，分布式，解析，持久化等）的具有很强通用性的项目模板。对于框架的学习，重点是要学习其框架的特性、各个功能的用法即可。 二，安装 三.基本使用 ...
分类：
其他好文 时间：
2018-10-31 23:24:24
阅读次数：
180
1.script标签 1.js代码的解析（包括下载js文件）会阻塞页面加载 2.当js文件放在头部，页面必须等所有js代码都被下载，解析和执行完成后才开始呈现页面内容（遇到body标签才呈现），对于那些需要很多js文件的页面来说，会有很大的延迟，浏览器页面空白时间， 所以尽量把全部js文件引用放在b ...
分类：
Web程序 时间：
2018-09-29 21:34:43
阅读次数：
228
1.小程序的启动方式： 冷启动 小程序首次打开或销毁后再次被打开 热启动 小程序打开后，在一段时间内（目前：5分钟）再次被打开，此时会将后台的小程序切换到前台。 2.根据以上两种启动方式，相应的更新机制为： 小程序冷启动时，会检查小程序是否有最新版本。如果有则将异步下载最新版本，但是仍将运行当前版本 ...
分类：
微信 时间：
2018-08-25 14:09:40
阅读次数：
327
前言： 自己利用requests模块下载页面，使用Beautifulsoup解析Html内容，久而久之会遇到各种性能问题，所有专业级的爬虫还得使用 爬虫框架 Scrapy Scrapy功能 引用twisted模块异步下载页面 HTML解析成对象 代理 延迟下载 URL字段去重 指定深度、广度 ... ...
分类：
其他好文 时间：
2018-08-06 14:37:20
阅读次数：
124
这几天一直在做微信小程序的二次开发，每天都要发布程序，但是发布之后微信上查看小程序和以前的一模一样，丝毫没有改变，但是我再本地上却改变了，而且没有开的不校验合法域名那个。这是为啥呢？？？？？ 这是跟小程序的更新机制有关的，因为小程序的更新机制是异步的，所以说部分用户不会马上应用上新版本。 小程序启动 ...
分类：
微信 时间：
2018-05-31 19:29:48
阅读次数：
4780
原文:Android项目实战（三十一）：异步下载apk文件并安装(非静默安装)前言： 实现异步下载apk文件 并 安装。（进度条对话框显示下载进度的展现方式） 涉及技术点： 1、ProgressDialog 进度条对话框 用于显示下载进度 2、AsyncTask 异步任务的使用 耗时操作不能再主线程... ...
分类：
移动开发 时间：
2018-04-29 11:50:13
阅读次数：
203
package com.example.demo1; import java.io.File; import java.io.FileOutputStream; import java.io.IOException; import java.io.InputStream; import java.n... ...
分类：
移动开发 时间：
2018-04-19 17:05:03
阅读次数：
313
