什么是scrapy框架: scrapy是一个基于Twisted异步框架的爬虫框架,scrapy具有异步性,效率高。 scrapy是用于爬取结构化数据 适合构建大型爬虫应用。 scrapy安装配置 lxml, wheel, Twisted, pywin32, scrapy 项目的常见与运行 创建: 1 ...
分类:
其他好文 时间:
2020-09-18 03:08:48
阅读次数:
31
介绍 1、组件介绍 apollo-configservice:提供配置获取接口,提供配置更新推送接口,接口服务对象为Apollo客户端apollo-adminservice:提供配置管理接口,提供配置修改、发布等接口,接口服务对象为Portal,以及Eureka 在Eureka之上我们架了一层Met ...
分类:
其他好文 时间:
2020-09-18 00:04:46
阅读次数:
40
Ubuntu18.04 安装配置 Cadence Virtuoso617 之前的Centos7为了使用spectre提供的matlab toolbox,结果不小心删除了/usr/lib64中的某些动态库(XXXX.so文件),导致重启之后内核崩溃。 这里送上忠告:尽量不要使用rm命令,使用mv命令改 ...
分类:
系统相关 时间:
2020-09-17 19:36:16
阅读次数:
119
1、安装 mariadb-install-db.exe mysqld install 2、修改utf8编码 [mysqld] default-storage-engine = innodb innodb_file_per_table max_connections = 4096 collation- ...
分类:
数据库 时间:
2020-09-17 19:21:40
阅读次数:
38
在JDK1.5之后的版本,配置Java环境变量的时候我们不再需要配置classpath,只需要配置Java_Home以及path即可 path就是指定可执行文件(.exe或者,bat)路径,可以在任何位置输入程序名就可以执行。 当出现javac不是内部或外部命令,也不是可运行的程序找对应路径有没有相 ...
###配置java环境并部署jenkinsyumlistjava-1.8*yuminstalljava-1.8.0-openjdktarxvfjdk-8u241-linux-x64.tar.gzln-sv/usr/local/src/jdk1.8.0_241//usr/local/jdk###java命令软连接ln-sv/usr/local/jdk/bin/java/usr/bin/###配置环境
分类:
其他好文 时间:
2020-09-17 18:29:01
阅读次数:
29
12CR1多了这个步骤出现以下错误,点击“全部忽略”有时候,如果当前操作系统用户名有中文或有空格,这两个步骤会报错,如果报错,oracle服务都不会安装成功,1521端口也没监听。这个步骤是创建数据库12CR1这个过程要很久二、安装客户端2.1由于PLSQL没有64位的,所以如果要使用PLSQL连接64位的服务端的话,必须要安装32位的客户端三、安装PLSQL四、配置法1:此法非常好,使用此法一定
分类:
数据库 时间:
2020-09-17 18:26:23
阅读次数:
42
注意:这种方式报警采用的是邮件方式,并不包含微信报警方式,因为采用的是国外的docker镜像,主要作用是在kibana中安装配置插件,图形化配置rule告警规则,其实就跟直接编辑告警规则类似 1.创建几个文件夹保存ElastAlert相关配置信息,用来挂载到容器中使用 mkdir -p /mnt/e ...
分类:
其他好文 时间:
2020-09-17 17:25:36
阅读次数:
38
一、下载安装包 安装包下载地址:https://nodejs.org/en/download/。 二、安装过程 基本就是一直Next,其中有些地方需要注意。 1、安装路径: 可以修改默认的安装路径。 2、安装一些依赖的东西: 这里提示一些npm模块需要从C/C++编译,会安装一些的C、C++和Pyt ...
前段时间在上NSX-T的安装配置课程中,有同学问怎么给NSX-T的管理群集配置一个基于NSX-T的负载均衡器,本人在自己的测试环境里简单试了一下,整个过程并不难,记录如下,供感兴趣的朋友做个参考。实验环境:NSX-T3.0.0.0.0.15946738,因为没有足够的物理机,整个环境是基于vSphere虚拟化的平台搭建,主要组件配置及版本包括:vCenter:7.0.0(build:1595259
分类:
其他好文 时间:
2020-09-17 16:53:57
阅读次数:
37