scrapy-redis 分布式爬虫爬取房天下网站所有国内城市的新房和二手房信息 先完成单机版的爬虫，然后将单机版爬虫转为分布式爬虫 爬取思路 1. 进入 https://www.fang.com/SoufunFamily.htm 页面，解析所有的省份和城市，获取到城市首页链接 2. 通过分析，每个 ...
分类：
Web程序 时间：
2020-05-31 10:50:03
阅读次数：
94
一、webkaka http://yali.webkaka.com/ (可惜目前无法访问)是国内的一个站点，可以免费压力测试。主要分“压力测试”和“负载测试”， 压力测试可以测试网站在某个特定的持续的压力下运行的稳定性。负载测试可以测试网站瞬间能承受的压力。下面是我压测的情况。 可以选择并发用户数（ ...
分类：
Web程序 时间：
2020-05-31 01:06:38
阅读次数：
2246
简介 随着近些年微服务在国内的盛行，消息驱动被提到的越来越多。主要原因是系统被拆分成多个模块后，一个业务往往需要在多个服务间相互调用，不管是采用HTTP还是RPC都是同步的，不可避免快等慢的情况发生，系统性能上很容易遇到瓶颈。在这样的背景下，将业务中实时性要求不是特别高且非主干的部分放到消息队列中是 ...
分类：
编程语言 时间：
2020-05-31 00:41:19
阅读次数：
78
BlueHost主机在搭建网站时最常用的主机，由于其性价比比较高和稳定性好而受到国内外追捧，非常适合中小型企业或者个人站长，能够降低服务器方面的成本。今天呢，小编主要给大家介绍有关虚拟主机常见的安全防护方式的相关内容。一、数据验证非法输入是程序与数据库常见的漏洞之一，在数据被输入前应该对其合法性进行检验。通常使用的检验方式是数据验证，设置程序，对任何输入的内容进行检查，接收能接收的内容，拒绝不能接
分类：
其他好文 时间：
2020-05-30 15:52:59
阅读次数：
86
临时使用 pip install -i https://pypi.tuna.tsinghua.edu.cn/simple some-package 默认使用 # windows系统使用cmd快速设置 pip install pip -U # 升级pip到最新版本 pip config set glo ...
分类：
其他好文 时间：
2020-05-30 15:39:08
阅读次数：
80
国内镜像：阿里 打开IntelliJ IDEA->Settings ->Build, Execution, Deployment -> Build Tools > Maven 或者直接搜索maven 具体如下图所示： 而一般情况下在c:\Users\xx.m2\这个目录下面没有settings.xm ...
分类：
其他好文 时间：
2020-05-30 01:14:16
阅读次数：
69
前言 前一篇已经开发了大部分框架，包含视频上下滑动播放，这次将上次未完成的数据显示友好显示，以及底部音乐走马灯特效，另外优化了加载数据的bug，在dart语言里 & 会自动变成& 另外优化了代码逻辑. 本系列会持续更新，将各个模块及功能持续完善，地址：https://github.com/W ...
分类：
其他好文 时间：
2020-05-29 13:29:14
阅读次数：
115
小程序是继APP和H5页面应用之外的又一类面向移动应用场景的应用。相较于公众号微商城，小程序微商城基于各大大流量平台，有着成本低，流量入口更丰富，使用体验流畅等优势。是目前非常受欢迎的应用之一。我们常见的小程序有微信小程序，百度小程序，支付宝小程序。微信小程序最为常见和用到最多。今天就以几家微信小程序商城为例，给大家介绍几家大的小程序第三方工具的各自特点优势，给大家参考。有赞有赞微商城是国内主流的
分类：
微信 时间：
2020-05-29 10:40:10
阅读次数：
169
ubuntu换源 目的：ubuntu默认的源是国外的，使用apt-get的时候很慢，换成国内的源可以在安装软件时快很多很多。我用的是ubuntu16.04。 相关文件： /etc/apt/sources.list 步骤： （1）.先备份这个文件（以防以后需要） sudo cp /etc/apt/so ...
分类：
系统相关 时间：
2020-05-29 09:54:05
阅读次数：
101
linux新机器基本配置 目的：新安装的ubuntu，为了更符合个人习惯，和使用流畅，一般会进行下边的基本配置。 1.建立账户。 2.修改主机名。 3.配置网络。 4.改国内源。 5.调整磁盘。 6.打开ssh（大部分机器会默认打开）。 7.安装软件（这个不用说，肯定得安，哈哈）。 注：这些配置只是 ...
分类：
系统相关 时间：
2020-05-29 09:15:38
阅读次数：
99
