一，介绍 Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架，非常出名，非常强悍。所谓的框架就是一个已经被集成了各种功能（高性能异步下载，队列，分布式，解析，持久化等）的具有很强通用性的项目模板。对于框架的学习，重点是要学习其框架的特性、各个功能的用法即可。 二，安装 三.基本使用 ...
分类：
其他好文 时间：
2018-10-31 23:24:24
阅读次数：
180
大数据项目由业务驱动，一套完整且优秀的大数据解决方案对企业的发展具有战略性意义。 由于数据来源多样，导致来自不同数据源的数据类型、规模等具有不同的特征。在处理分析大数据时，将涉及到更多维度（治理、安全等）。 因此在采用大数据分析前，需对项目的整个管理流程和决策框架提前考虑。需要考虑到的内容主要有： ...
分类：
其他好文 时间：
2018-10-26 22:15:22
阅读次数：
247
正则表达式（Regular Expression） 是用于描述一组字符串特征的模式，用来匹配特定的字符串。通过特殊字符＋普通字符来进行模式描述，从而达到文本匹配目的工具。类似于生活中常见的寻人启示，通过描述一个人的特征来进行“搜索匹配” 如今正则已经被我们广泛应用，目前被集成到了各种文本编辑器/文本 ...
分类：
其他好文 时间：
2018-10-02 20:07:58
阅读次数：
169
前言Prometheus是一个开源和社区驱动的监控&报警&时序数据库的项目。来源于谷歌BorgMon项目。现在最常见的Kubernetes容器管理系统中，通常会搭配Prometheus进行监控。主要监控：Node:如主机CPU，内存，网络吞吐和带宽占用，磁盘I/O和磁盘使用等指标。node-exporter采集。容器关键指标:集群中容器的CPU详细状况，内存详细状况，Network
分类：
Web程序 时间：
2018-09-26 10:50:36
阅读次数：
364
文章转自 https://blog.csdn.net/jameshadoop/article/details/44905643 Elasticsearch是一个实时的分布式搜索和分析引擎。它可以帮助你用前所未有的速度去处理大规模数据。 它可以用于全文搜索，结构化搜索以及分析，当然你也可以将这三者进行 ...
分类：
其他好文 时间：
2018-09-21 00:40:20
阅读次数：
229
计算机的基本硬件系统由运算器、控制器、存储器和输入、输出设备五大部件组成。运算器和控制器等部件被集成在一起统称为中央处理单元（Central Processing Unit，CPU）。 CPU的功能 （1）程序控制 CPU通过执行指令来控制程序的执行顺序，这是CPU的重要职能。 （2）操作控制 一条 ...
分类：
其他好文 时间：
2018-09-04 19:15:32
阅读次数：
549
Scheduler scheduler特性是在ProxySQL v1.2.0引入的。 scheduler是一个类似cron的调度器，已经被集成到ProxySQL中了，粒度可以达到毫秒级。通过admin即可配置：目前不支持配置文件配置，将来也没这个打算 Motivation scheduler可以以规 ...
分类：
数据库 时间：
2018-08-31 19:33:49
阅读次数：
963
function、bind是tr1里的特性，已被集成到C++0x/C++11 使用方法 1、使用tr1 头文件：<tr1/functional> std::tr1::function std::tr1::bind std::tr1::placeholders::_N 2、使用C++0x/11 头文件 ...
分类：
编程语言 时间：
2018-08-26 16:43:16
阅读次数：
233
1.1 简述 浏览器在访问一个IP地址的时候，一般会自动在地址前方加上HTTP:// 表示其基于http协议访问。 一般而言，http跟tcp在本质上没有区别。 tcp连接的过程，在JAVA语言中，在java.net包中被集成，可以很方便的调用。 tcp连接的确立基于三次握手，其过程本质上是C端与S ...
分类：
Web程序 时间：
2018-08-25 18:57:36
阅读次数：
198
1、Proxmox proxmox是一个开源的虚拟化管理平台,支持集群管理和HA.在存储方面,proxmox除了支持常用的lvm,nfs,iscsi,还支持集群存储glusterfs和ceph,这也是我们选择它的原因.官方网站http://www.proxmox.com。 Proxmox VE (P ...
分类：
Web程序 时间：
2018-06-06 15:28:26
阅读次数：
932
