用Python开发爬虫是一件很轻松愉悦的事情,因为其相关库较多,而且使用方便,短短十几行代码就可以完成一个爬虫的开发;但是,在应对具有反爬措施的网站,使用js动态加载的网站,App采集的时候就得动动脑子了;并且在开发分布式爬虫,高性能爬虫的时候更得用心设计。 Python开发爬虫常用的工具总结 re ...
分类:
编程语言 时间:
2019-12-10 22:16:10
阅读次数:
161
[toc] 个人页面展示: django后台管理: 路由分发本质: 数据暴露: 文件上传: 站点样式: ...
分类:
其他好文 时间:
2019-12-10 22:15:45
阅读次数:
118
LR分析简介 LR分析是应用最广泛的一类分析方法,它是实用的编译器功能中最强的分析器,其特点是: 1,采用最一般的无回溯移进-规约方法。 2,可分析的文法是LL文法的真超集。 3,能够及时发现错误,及时从左扫描输入序列的最大可能。 4,分析表较为复杂,难以手工构造。 实验内容 根据LR分析表acti ...
分类:
编程语言 时间:
2019-12-10 22:15:26
阅读次数:
104
在学习snort的时候,参考了很多文章,遇到了许多坑。这里是完成搭建的过程。 在Ubuntu 16.04下安装snort 安装snort 首先,新建一个文件夹来保存需要的tar包的文件夹 #mkdir ~/snort_src #cd ~/snort_src 安装必备的组件 #sudo apt-get ...
分类:
其他好文 时间:
2019-12-10 22:14:55
阅读次数:
167
官方QQ群 1+x 证书 Web 前端开发 JavaScript 专项练习 "http://blog.zh66.club/index.php/archives/198/" 1+x 证书 Web 前端开发初级理论考试样题 2019 http://blog.zh66.club/index.php/arc ...
分类:
Web程序 时间:
2019-12-10 22:14:38
阅读次数:
257
链表: 以节点的方式来存储 每个节点包含data域,next域:指向下一个节点 各个节点不一定连续存储 分为带头节点和不带头节点(根据实际需求确定) head节点: 不存放具体数据,作用就是表示单链表的头 //单链表 public class SingleLinkedListDemo { publi ...
分类:
其他好文 时间:
2019-12-10 22:14:17
阅读次数:
111
Basic Auth攻击 1、Basic Auth认证简介 Basic身份认证,是HTTP 1.0中引入的认证方案之一。虽然方案比较古老,同时存在安全缺陷,但由于实现简单,至今仍有不少网站在使用它。 例如Apche Tomcat、路由器等。 2、认证步骤 1、如下,用户访问受限资源 /protect ...
分类:
其他好文 时间:
2019-12-10 22:13:59
阅读次数:
134
过拟合问题 导致结果不正确。 解决办法 使$\theta$的取值尽量小,已达到曲线平滑。 但当$\theta$取值过小会导致 欠拟合 改变代价函数 线性回归: $$J(\theta)=\frac{1}{2m}(\sum_{i=1}^{m}({h_\theta(x^i) y(x^i)})^2+\lam ...
分类:
其他好文 时间:
2019-12-10 22:13:33
阅读次数:
106
其实Rocketmq的给第三方的插件已经全了,如果大家有兴趣的话请移步https://github.com/apache/rocketmq-externals。本文主要是结合笔者已有的rmq在spark中的应用经验对rocketmq做简单介绍以及经验总结,当然免不了会将rocketmq和如今特别火爆 ...
分类:
其他好文 时间:
2019-12-10 22:13:08
阅读次数:
157
ansible介绍 转自虎哥(tiger的博客):http://www.lxh1.com/2019/12/06/linux/ansible%E4%BB%8B%E7%BB%8D/ 本文字数: 5.8k 阅读时长 ≈ 10 分钟 一、ansible介绍 1.1 概念 Ansible自动化运维工具,基于P ...
分类:
其他好文 时间:
2019-12-10 22:12:56
阅读次数:
111
1.什么是redis? Redis 是一个基于内存的高性能key-value数据库。 2.Reids的特点 Redis本质上是一个Key-Value类型的内存数据库,很像memcached,整个数据库统统加载在内存当中进行操作,定期通过异步操作把数据库数据flush到硬盘上进行保存。因为是纯内存操作 ...
分类:
其他好文 时间:
2019-12-10 22:12:40
阅读次数:
110
一、在centos7主机创建用于虚拟化的网桥 1)增加 /etc/sysconfig/network-scripts/ifcfg-br0 DEVICE=br0BOOTPROTO=staticONBOOT=yesTYPE=BridgeIPADDR=192.168.137.122NETMASK=255. ...
分类:
其他好文 时间:
2019-12-10 22:12:04
阅读次数:
303
import java.io.*;import java.util.ArrayList;/*4. 已知在项目的 temp目录下有一个stu.txt文件,内容如下:abcdefghi需求:将此文件拷贝到D盘根目录下,拷贝时在文件每一行的末尾追加当前行数。末尾和行数使用--连接。例如: 拷贝后的文件内容 ...
分类:
其他好文 时间:
2019-12-10 22:11:52
阅读次数:
87
一、Mac下SVN操作checkout文件到本地svn checkout https://xxx --username xx --password xxsvn checkout https://xxx --username xx --password xx /Users/lc/workspace 更 ...
分类:
系统相关 时间:
2019-12-10 22:11:37
阅读次数:
127
实验要求: 实验拓扑: 配置R1 端口IP 配置R2端口IP 配置R3 端口IP 配置IT IP 配置YF基本配置 配置CW 配置Server1 配置Client1 配置R1 OSPF 配置R2 OSPF 配置 IT OSPF OSPF Stub是一个末梢区域,当一个OSPF区域处于整个自治系统边界 ...
分类:
其他好文 时间:
2019-12-10 22:11:17
阅读次数:
165
/*有一个Map集合里面存储的是学生的姓名和年龄,内容如下{张三丰=21, 灭绝师太=38, 柳岩=28, 刘德华=40, 老鬼=36, 王二麻子=38}a.将里面的元素用两种遍历方式打印到控制台上b.将老鬼的年龄改成66c.将年龄大于24的学生姓名,存入到项目下的 temp\\student.tx ...
分类:
其他好文 时间:
2019-12-10 22:10:51
阅读次数:
108