1、准备好爬虫程序 2、修改项目配置 找到项目配置文件scrapy.cnf,将里面注释掉的url解开来 本代码需要连接数据库,因此需要修改对应的数据库配置 其实就是将里面的数据库地址进行修改,变成远程数据库服务器地址,需要保证scrapy服务器能够连接数据库服务器 3、部署项目 在部署项目之前要保证 ...
分类:
其他好文 时间:
2019-10-04 00:06:50
阅读次数:
181
以下命令可以在root身份下保存为shell脚本直接bash一次性执行 参考: https://yeasy.gitbooks.io/docker_practice/install/centos.html https://docs.docker.com/install/linux/docker-ce/ ...
分类:
其他好文 时间:
2019-09-28 12:34:06
阅读次数:
112
Rsync 简介 rsync 是一款开源的、快速的、多功能的、可实现全量及增量的本地或远程数据同步备份的优秀工具。Rsync软件适用于unix/linux/windows等多种操作系统平台。 传统的 scp 和 cp 工具拷贝每次均为完整拷贝,而rsync除了可以完整拷贝外,还具备增量拷贝功能。因此 ...
分类:
其他好文 时间:
2019-09-26 13:28:28
阅读次数:
74
1.1 tsar是什么? tsar是淘宝自己开发的一个采集工具(类似于sar工具),主要用来收集服务器的系统信息(如cpu,io,mem,tcp等),以及应用数据(如squid haproxy nginx等)。 收集到的数据存储在磁盘上,可以随时查询历史信息,输出方式灵活多样,另外支持将数据存储到m ...
分类:
其他好文 时间:
2019-09-25 14:08:49
阅读次数:
117
一,部署rsync #yum -y install rsync #创建服务用户:useradd rsync -s /sbin/nologin -M(不创建家目录) #创建配置文件:vim /etc/rsyncd.conf #创建rsync同步密码文件,并设置权限为600 [root@122_serv ...
分类:
其他好文 时间:
2019-09-23 14:59:17
阅读次数:
107
1. 容器化 Docker 的横空出世,给了容器技术带来了质的飞跃,Docker 标准化了服务的基础设施,统一了应用的打包分发,部署以及操作系统相关类库等,解决了测试生产部署时环境差异的问题。对于运维来讲,由于镜像的不可变性,更容易进行服务部署和回滚操作。利用各种第三方容器管理平台,实现一键部署、动 ...
分类:
编程语言 时间:
2019-09-23 09:35:58
阅读次数:
76
Django + uwsgi + nginx部署 参考:https://www.cnblogs.com/fnng/p/5268633.html 1、Django项目上线部署 [root@master djan]# pwd /root/djan [root@master djan]# cat requ ...
分类:
其他好文 时间:
2019-09-20 14:04:50
阅读次数:
82
#定义Nginx运行的用户和用户组user www www; #nginx进程数,建议设置为等于CPU总核心数。worker_processes 8; #全局错误日志定义类型,[ debug | info | notice | warn | error | crit ]error_log /var/ ...
分类:
其他好文 时间:
2019-09-17 09:40:59
阅读次数:
107
iSCSI(InternetSmallComputerSystemInterface),Internet小型计算机系统接口,又称为IP-SAN,是一种基于因特网及SCSI-3协议下的存储技术,由IETF提出,提出,并于2003年2月11如成为正式的标准。与传统的SCSI技术比较起来,iSCSI技术有以下三个革命性的变化:1.把原来只用于本机的SCSI协议透过TCP/IP网络发送,使连接距离可作无限
分类:
其他好文 时间:
2019-09-16 21:41:59
阅读次数:
155
云公司——提供云平台,面向应用公司; 应用公司——提供应用服务,直接面上用户。 云公司——提供基础平台(服务器、磁盘、带宽、网络等),以及服务部署、扩展、监控等,以及一些通用等服务(例如短信服务)。 应用公司——则无需在关心机房、服务器等物理设施,这些全部交给云公司。只需关注自己的应用服务,开发服务 ...
分类:
其他好文 时间:
2019-09-12 18:08:33
阅读次数:
97