1、网页 charles上通过proxy->proxy setting进入代理设置 charles的Help->SSL Proxying->Install Charles Root Certificate 正常第一次进去这个证书应该是一个红叉 右键点击该证书，选择菜单中的“显示简介选项”，接着进入信 ...
分类：
Web程序 时间：
2020-04-14 00:53:17
阅读次数：
79
正则表达式实际上爬虫一共就四个主要步骤:明确目标(要知道你准备在哪个范围或者网站去搜索)爬(将所有的网站的内容全部爬下来)取(去掉对我们没用处的数据)处理数据(按照我们想要的方式存储和使用)正则表达式,又称规则表达式,通常被用来检索、替换那些符合某个模式(规则)的文本。正则表达式匹配规则re模块一般使用步骤使用compile()函数将正则表达式的字符串形式编译为一个Pattern对象注意:re对特
分类：
编程语言 时间：
2020-04-13 23:12:52
阅读次数：
83
一、概述 在代理模式（Proxy Pattern）中，一个类代表另一个类的功能。这种类型的设计模式属于结构型模式。 在代理模式中，我们创建具有现有对象的对象，以便向外界提供功能接口。 意图：为其他对象提供一种代理以控制对这个对象的访问。 主要解决：在直接访问对象时带来的问题，比如说：要访问的对象在远 ...
分类：
其他好文 时间：
2020-04-13 22:55:54
阅读次数：
75
在做弱网测试时，经常需要模拟各种网络环境，Charles恰好也提供了网络限制的功能，我们可以在"Proxy->Throttle Settings"路径下找到它，如下图所示。 "Throttle Settings"提供了一个总开关，勾选"Enable Throttling"即开启网络限制功能。在其下方 ...
分类：
其他好文 时间：
2020-04-13 22:41:52
阅读次数：
90
importurllibfromurllibimportrequestimportreurl="http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule"header={"User-Agent":"Mozilla/5.0(WindowsNT5.1;rv:52.0)
分类：
其他好文 时间：
2020-04-13 22:37:40
阅读次数：
138
awk awk '{pattern + action}' {filenames} 当我们所指定的规则脚本过长的时候，我们可以使用-f的选项加上我们的脚本文件。再复杂点我们可以直接调用shell脚本，就像我们在编写python时需要加上解释器一样，我们调用#!/bin/awk这样也可以进行调用。 ro ...
分类：
其他好文 时间：
2020-04-13 16:43:46
阅读次数：
73
在使用 Archiva 的时候，有时候会提示文件没有找到，或者文件不能下载。 这里需要注意提示的状态。 有时候提示的 404， 有时候提示的 500。 尤其是有时候，你使用 proxy 连接的时候 如果提示的是 404 的话，提示你的 Archiva 在可能的源仓库中已经进行了搜索，但是没有找到。 ...
分类：
其他好文 时间：
2020-04-13 12:09:52
阅读次数：
55
正向代理 正向代理主要是代理服务器接收客户端的请求，转发给外网中真正的目标服务器，正向代理接收内网中客户端的请求， 例： server { listen 80 default_server; resolver 8.8.8.8 location / { proxy_pass http://$host$ ...
分类：
其他好文 时间：
2020-04-13 10:38:14
阅读次数：
68
一、需求 假如，我们需要这样的代理，平时我们运行调试的时候，就在localhost的默认目录下的html里面就行。如果我们请求的路径含有指定的目录的时候，我们需要它去我们指定的域名和端口请求数据，而不是在本地请求。 比如，当请求 的时候，我们是想他远程访问地址是 ，而不是在我们本地查找该文件。 二、 ...
分类：
其他好文 时间：
2020-04-13 01:12:30
阅读次数：
91
分布式缓存是现在很多分布式应用中必不可少的组件，但是用到了分布式缓存，就可能会涉及到缓存与数据库双存储双写，你只要是双写，就一定会有数据一致性的问题，那么你如何解决一致性问题？ Cache Aside Pattern 最经典的缓存+数据库读写的模式，就是 Cache Aside Pattern。读的 ...
分类：
数据库 时间：
2020-04-12 18:53:07
阅读次数：
69
