需求:做一个windows服务,实现从ftp服务器实时下载或者更新文件到本地磁盘。 功能挺简单的。直接写个ftp工具类用定时器跑就能搞定,那我为什么不用呢? 别问,问就是我无聊啊,然后研究一下Flume打发时间。哈哈~ 一、Flume部分 Source组件和Sink组件用的都是第三方。 source ...
恢复内容开始 PE一直无法识别本地硬盘一直以为是主板设置的事情!原来是新兴的接口(M.2固态具体我不大明白)的事情,需要磁盘驱动,因为PE是精简的大多数不带驱动,但是2018年的新更新的PE基本都支持了 (包括老毛桃.....各种带广告锁主页的)用最新的PE制作工具就可以........一定要用最新 ...
分类:
其他好文 时间:
2018-12-17 21:34:34
阅读次数:
4549
1、管道的高级操作 将爬取到的数据值分别存储到本地磁盘、redis数据库、mysql数据。 qiubai.py pipelines.py 在settings配置 打开终端,先进入文件目录 多个url数据爬取 1、新建一个工程 cd 到需要保存工程的目录 scrapy startproject qiu ...
分类:
其他好文 时间:
2018-12-09 13:54:42
阅读次数:
155
很多情况下,VeeamBackup&Repository使用CIFS共享位置或者本地磁盘作为repository。如果面临***,如勒索病毒,该Repository中文件同样会被加密。这样,就会面临生产和备份数据全部被勒索加密的危险境地。所以考虑用在Veeam服务器中添加一台LinuxServer作为Repository。因为Veeam不是以SMB协议访问repository,所以能够有效降
分类:
系统相关 时间:
2018-12-05 18:36:29
阅读次数:
569
在项目生产环境我们经常需要实现文件共享,传统的常见方案是通过NFS,实现服务器之间共享某一块磁盘,通过网络传输将分散的文件集中存储在一块指定的共享磁盘,实现基本的文件共享。实现这种方案,分服务端和客户端,将服务端的磁盘mount到客户端指定目录下,在客户端操作就像操作本地磁盘一样,nfs基本的安装如 ...
分类:
系统相关 时间:
2018-11-29 11:10:20
阅读次数:
183
浏览器缓存 浏览器缓存是浏览器在本地磁盘对用户最近请求过的文档进行存储,当访问者再次访问同一页面时,浏览器就可以直接从本地磁盘加载文档。 所以根据上面的特点,浏览器缓存有下面的优点: 减少冗余的数据传输 减少服务器负担 加快客户端加载网页的速度 浏览器缓存是Web性能优化的重要方式。那么浏览器缓存的 ...
分类:
其他好文 时间:
2018-11-25 13:19:18
阅读次数:
188
filebeat不用多说就是扫描本地磁盘日志文件,读取文件内容然后远程传输。 docker容器日志默认记录方式为 json-file 就是将日志以json格式记录在磁盘上 格式如下: { "log": "2018-11-16 01:24:30.372 INFO [demo1,786a42d3b893 ...
分类:
其他好文 时间:
2018-11-23 12:34:35
阅读次数:
251
linux学习点滴 目录: 1.Ubuntu安装 2.修改默认root密码 3.vim入门 1.Ubuntu安装: (1)启动盘制作: a.下载启动盘制作工具Universal USB Installe, "下载地址" ; b.下载Ubuntu系统镜像,到本地磁盘, "官方下载地址" ; c.安装U ...
分类:
系统相关 时间:
2018-11-02 11:06:15
阅读次数:
177
1.缓存 缓存,对应工程师来讲简直太熟悉了,太方便了,省略到资源或数据的获取方式,直接缓存到离用户访问最快的地方,也降低服务器的压力,比如: (1)静态文件获取 服务器->cdn->本地磁盘->本地内存 (2)数据获取 数据库->内存型数据库 (3)host 缓存 主域名服务器->顶级域名服务器-> ...
分类:
其他好文 时间:
2018-10-28 13:39:17
阅读次数:
2729