一.全站数据的爬取 二.如何进行post请求发送 和cookie处理 1.post请求的发送 2.cookie的处理 三.请求传参 四.中间件 1.UA池 和代理池 代理池:ip代理 - 作用：尽可能多的将scrapy工程中的请求的IP设置成不同的。 ①在middlewares.py 文件中 ②在s ...
分类：
其他好文 时间：
2019-06-03 21:56:10
阅读次数：
323
原文参考：https://www.cnblogs.com/kevingrace/p/6496899.html Tmux是一个优秀的终端复用软件，类似GNU Screen，但来自于OpenBSD，采用BSD授权。使用它最直观的好处就是，通过一个终端登录远程主机并运行tmux后，在其中可以开启多个控制台 ...
分类：
系统相关 时间：
2019-06-03 10:52:49
阅读次数：
151
用MobaXterm运行程序时报上面的错，解决方法： 点击setting -> X11里 将 RANDR 里的勾去掉后点击OK即可。 ...
分类：
其他好文 时间：
2019-06-01 21:32:22
阅读次数：
921
ublic Link GetLink([FromUri] FileRequest fileRequest) { if (ModelState.IsValid) { var xml = WebConfigurationManager.AppSettings["appDiscoveryXml"]; va ...
[root@saomd linux]# yum localinstall VirtualBox-3.1-3.1.0_55467_fedora12-1.i686.rpm 来安装，需要的rpm包也下载完成了，只是最后提示warning: rpmts_HdrFromFdno: Header V4 DSA ...
分类：
其他好文 时间：
2019-05-24 17:15:54
阅读次数：
131
添加 ELRepo 源: 安装显卡检查程序: sudo yum install nvidia-detect 对于大多数比较新的显卡来说，直接安装最新版的驱动即可: sudo yum install -y nvidia-x11-drv nvidia-x11-drv-64bit 对于大多数比较新的显卡来 ...
分类：
其他好文 时间：
2019-05-19 09:24:04
阅读次数：
150
方式一：通过form表单中，html input 标签的“file”完成 1 2 3 4 5 6 # 前端代码uoload.html <form method="post" action="/upload/" enctype="multipart/form-data"> <input id="use ...
分类：
Web程序 时间：
2019-05-18 21:09:50
阅读次数：
224
本节内容 Celery介绍和基本使用 在项目中如何使用celery 启用多个workers Celery 定时任务 与django结合 通过django配置celery periodic task 一、Celery介绍和基本使用 Celery 是一个 基于python开发的分布式异步消息任务队列，通 ...
分类：
其他好文 时间：
2019-05-16 20:30:43
阅读次数：
181
re模块(* * * * *) 就其本质而言，正则表达式（或 RE）是一种小型的、高度专业化的编程语言，（在Python中）它内嵌在Python中，并通过 re 模块实现。正则表达式模式被编译成一系列的字节码，然后由用 C 编写的匹配引擎执行。 字符匹配（普通字符，元字符）： 1 普通字符：大多数字 ...
分类：
其他好文 时间：
2019-05-10 11:26:27
阅读次数：
134
awk、grep、sed是linux操作文本的三大利器，合称文本三剑客，也是必须掌握的linux命令之一。三者的功能都是处理文本，但侧重点各不相同，其中属awk功能最强大，但也最复杂。grep更适合单纯的查找或匹配文本，sed更适合编辑匹配到的文本，awk更适合格式化文本，对文本进行较复杂格式处理。 ...
分类：
系统相关 时间：
2019-05-05 13:15:23
阅读次数：
185
